Wikimedia Apps/Team/Android/Machine Assisted Article Descriptions
Pozadí projektu
Android aplikace Wikipedie nabízí možnosti pro přidávání krátkých popisků od roku 2017. V roce 2019 tým vývojářů zpřístupnil nástroj pro přidávání krátkých popisků přihlášeným uživatelům. O současném stavu nástroje návrhu editací pro krátké popisky si můžete přečíst více zde.
V březnu 2022 tým pro Android zpřístupnil možnost editace krátkých popisků krátce registrovaným editorům, a to na základě zpětné vazby od uživatelů anglické Wikipedie, kteří si přáli, aby uživatelé, zejména noví, zlepšili kvalitu svých krátkých popisků.
V květnu 2022 vytvořila Výzkumná část Švýcarského institutu, známá také jako EPFL, strojový model nazvaný Descartes, který navrhuje krátké popisky článků Wikipedie. Po nezávislém testování modelu Descartes se EPFL obrátila na Nadaci Wikimedia a nabídla tento model, který pomáhá s tvorbou krátkých popisků, wikipedistům. S ohledem na žádosti o zlepšení kvality krátkých popisků, zejména od nových editorů, Android tým rozhodl, že by mohl nabídnout strojové návrhy využívající model Descartes na podporu uživatelů, pouze pokud nástroj Descartes přinese podobné slibné výsledky u wikipedistů jako při počátečním testování EPFL.
V období od ledna do dubna 2023 tým vytvořil uživatelské rozhraní a změny na straně klienta modelu Descartes a zároveň zavedl ochranné prvky proti rizikům, poté od poloviny května do poloviny června 2023 nasadil upravenou verzi modelu. Verze modelu, kterou uživatelé viděli v aplikaci pro Android, obsahovala kontroly kvality. Návrhy byly navíc skryty v nabídce, kdy uživatelé museli aktivně kliknout, aby si prohlédli strojové návrhy, a poté se rozhodnout, zda jeden z nich využijí, nebo ručně zadají jeho krátký popis.
Koncem června byla tato funkce z aplikace odstraněna. V období mezi polovinou června a koncem července tým Androidu oslovil různé jazykové komunity a vyzval je, aby během trvání experimentu sloužily jako hodnotitelé a hlídači úprav vytvořených prostřednictvím nástroje. Dobrovolníci, kteří reagovali na výzvu k diskusi prostřednictvím e-mailu prostřednictvím wiki, se experimentu účastnili jako hodnotitelé. Zkušení editoři hodnotili editace publikované během doby trvání experimentu pomocí strojových návrhů ve spojení s krátkými popisy generovanými lidmi. Dobrovolníci byli vyzváni k opravě chyb a k hodnocení, které skončilo na začátku srpna 2023.
Po počátečním přezkoumání dat měl tým dostatek poznatků, aby navrhl migraci modelu Descartes z dočasného prostoru na Cloud VPS na trvalý hostingový prostor LiftWing. Po důkladnější analýze dat, kterou provedl datový analytik našeho týmu, náš výzkumný tým a výzkumný tým EPFL, jsme se cítili dostatečně přesvědčeni o výsledcích, abychom upravenou verzi modelu nabídli trvale v aplikaci jako návrhy lidským editorům, až po schválení jazykovými komunitami a po setkáních, na kterých jsme zjistili, zda by bylo možné provést další změny, které by model vylepšily tak, aby splňoval svůj zamýšlený účel – podpořit editory při psaní kvalitnějších krátkých popisků.
Současný stav
V srpnu 2024 jsme zveřejnili výsledky experimentu a informace o tom, jaké úpravy na straně aplikace byly provedeny v cloudové verzi modelu pro účely kvality, a nabídli jsme návrhy, zda by měla daná jazyková komunita zvážit přijetí této funkce. V období od září do listopadu 2024 budeme provádět informační kampaň, abychom informovali produktový tým systému Android o tom, jaká další vylepšení lze provést a zda by komunity chtěly funkci přijmout. Ačkoli máme doporučení, zda by funkce mohla být na základě údajů užitečná, přijetí je ponecháno výhradně na členech příslušné jazykové komunity. Uvědomujeme si, že s krátkými popisy se v různých jazykových komunitách zachází různě, a kroky k zajištění krátkých popisů článků se v průběhu let vyvíjely, proto přistupujeme k oslovování jednotlivých komunit.