Growth/Porozumění prvnímu dni

This page is a translated version of the page Growth/Understanding first day and the translation is 100% complete.


Tato stránka popisuje práci týmu Growth na projektu „Porozumění prvnímu dni“, také známém jako Cesta editora (anglicky EditorJourney), a obsahuje cíle, plány, rozhodnutí a výsledky. Nové informace budeme postupně vkládat na speciální stránku, důležité informace budou vloženy i zde.

Jelikož tento projekt je zcela o zprovoznění a měření, zapojuje se do něj velké množství týmů WMF, včetně právního, bezpečnostního a analytického. Je pro nás důležité respektovat soukromí uživatelů a zároveň stále získávat informace, které potřebujeme, abychom vylepšili zážitek nováčků. Současně s tím, jak se naše názory na nejlepší cestu, jak toto zařídit, mění, mění se i naše plány popsané na této stránce.

Současný stav

  • 2018-11-19: Zaznamenávací schéma EditorJourney bylo nasazeno na české i korejské Wikipedii.
  • 2019-01-05: Prvotní výsledky projektu byly publikovány.
  • 2019-01-16: Zaznamenávací schéma EditorJourney bylo nasazeno na vietnamské Wikipedii.
  • 2019-07-01: Zaznamenávací schéma EditorJourney bylo nasazeno na arabské Wikipedii.
  • 2020-07-16: „Rozhodli jsme se nenasazovat EditorJourney na nové wiki, protože jsme skončili s analýzou dat, která generuje, a nechceme ukládat více uživatelských dat, než je nutné.

Shrnutí

Většina nováčků nikdy neuloží jedinou editaci -- ale ti, kteří tak učiní, editace uloží zpravidla během jednoho dne od vytvoření účtu. O tom, co nováčci během svého prvního dne dělají, máme velmi málo informací -- jestli si čtou nápovědu, pokouší se editovat a editace neukládají nebo dělají něco jiného. Větší znalosti o prvotních zážitcích nám může pomoci zážitek nováčků vylepšit, stejně jako přimět více registrovaných uživatelů během svého prvního dne editovat. Abychom porozuměli tomu, co nováčci během svého prvního dne dělají, zaznamenáváme informace o aktivitě nováčků na české a korejské Wikipedii, což nám pomůže odpovědět na následující otázky:

  • Jaké jsou nejčastější činnosti, které čeští a korejští nováčci během svých prvních 24 hodin provádějí?
  • Kolik procent z těchto nováčků provede každou z těchto činností?
  • Které činnosti vedou či nevedou k editacím?

Tým Growth pracuje na zodpovězení těchto otázek zavedením zaznamenávacího schématu pro všechny nové uživatele na cílových Wikipediích (česká, korejská a vietnamská) během prvních 24 hodin existence účtu. Abychom si udělali ucelený obrázek, plánujeme tato data propojit s dalšími schématy, týkajících se funkcí, jako jsou Echo, vizuální editor nebo interaktivní průvodce. Tato funkcionalita byla nasazena v listopadu 2018 na českou a korejskou Wikipedii. V lednu 2019 byla publikována prvotní zpráva o výsledcích.

Původní komunitní diskuse o tomto projektu je k dispozici.

Proč má tento projekt prioritu

Náš výzkum nás hodně naučil o motivacích a potřebách nových editorů a jednou z nejdůležitějších věcí, které jsme se naučili, je, že úplně první zkušenosti nového editora s editací mohou být rozhodujícím faktorem pro to, zda budou pokračovat v úpravách. Většina lidí, kteří si vytvářejí účty na Wikipedii, nikdy neprovádí úpravy, ale z těch, kteří to dělají, k této úpravě obvykle dojde v den, kdy si vytvoří svůj účet. Ve spojení s projektem "Personalizovaný první den" je tento projekt kritický pro další učení o prvních okamžicích pokusů o úpravy. Potřebujeme vědět více o tom, jak noví editoři přistupují ke svým prvním úpravám, abychom věděli, kam se zapojit a pomoci. Pokud například vidíme, že mnoho nových editorů čte obsah nápovědy, ale pak se nepokusí o úpravu, můžeme dojít k závěru, že obsah nápovědy je důležitý, ale neužitečný tak, jak je aktuálně napsán a prezentován. Nebo pokud vidíme mnoho nových editorů, kteří rovnou otevřou editor, ale pak před uložením úpravy odejdou, můžeme dojít k závěru, že nejdůležitějším místem pro poskytnutí pomoci je uvnitř editace.

Tento projekt jsme upřednostnili, protože:

  • Pomáhá nám to zlepšit naše učení v této rané fázi práce našeho týmu s novými editory.
  • Členové komunity byli pozitivní ve zpětné vazbě na nápad.
  • Pokládá základy pro zjištění, zda změny, které provedeme v novém editoru, změní jejich chování.
  • V budoucnu bude snadné přeložit a aplikovat na jiné wikiny.
Sekce níže se mohou během několika týdnů výrazně změnit, jsou příliš technické anebo nejsou relevantní pro porozumění tomuto projektu. Rozhodli jsme se je proto nepřeložit.

Specifikace

Tato část obsahuje vyvíjející se plány měření.

Celkové parametry

  • Bude platit pro všechny nové účty vytvořené v české a korejské Wikipedii, ale automaticky vytvořené účty z jiných wiki vyloučí.
  • Bude aktivní po dobu prvních 24 hodin existence nového účtu.
  • Na uživatelské úrovni zaznamená návštěvy stránek ve jmenných prostorech, kde mohou noví editoři hledat pomoc, jako jsou jmenné prostory Nápověda, Wikipedie nebo Uživatel (a jejich související prostory Talk).
  • U stránek v citlivějších jmenných prostorech, jako je článek, koncept nebo portál, se zaznamená pouze návštěva jmenného prostoru, nikoli konkrétní název stránky.
  • Data budou dostupná pouze lidem s přístupem NDA.
  • Data budou po 90 dnech anonymizována, smazána a nebo agregována.

Konkrétní otázky

Níže uvedený přehled uvádí konkrétní otázky, na které chceme v tomto přístrojovém úsilí odpovědět. Většina z těchto otázek bude zodpovězena pomocí nového schématu EditorJourney EventLogging, které je vytvořeno pro tento projekt. Některé otázky, zejména ty, které jsou pod číslem 4 ("Po zahájení úprav"), budou zodpovězeny propojením se stávajícími schématy EventLogging vytvořenými pro měření stávajících funkcí.

  1. Souvislost: Jak často se účty vytvářejí z různých možných kontextů vytváření účtů?
    • Hlavní stránka
    • Zkušenosti čtenářů
    • Zkušenosti s úpravami
  2. Průzkum: Když se zobrazí průzkum "Personalizovaný první den " ihned po registraci účtu, odpoví uživatelé na jednu nebo více otázek v průzkumu, nebo průzkum úplně vynechají a vrátí se k tomu, co dělali před registrací účtu?
  3. Po vytvoření účtu, jaké jsou různé běžné pracovní postupy, kterými procházejí noví majitelé účtů před provedením úpravy (nikdy nebo před provedením úpravy)? Chceme spočítat frekvenci pracovních postupů, jako jsou, ale nejen, následující. Důvod, proč to "není omezeno na" je ten, že ještě nevíme, jaké pracovní postupy objevíme.
    • Nejprve si přečtěte články: přečtení mnoha stránek ve jmenném prostoru článku a poté buď opuštění, nebo úpravy.
    • Naučit se nejdřív: Prohlédnout si nějaký učební obsah a pak buď odejít, nebo jej upravit. Tento obsah se nachází v jiných jmenných prostorech, než je jmenný prostor článku, nebo prostřednictvím určitých akcí, které nemusí být zachyceny v zobrazeních stránek nebo existujících schématech:
      • Zobrazení obsahu v nápovědě, Wikipedii nebo jmenných prostorech uživatelů (mimo jiné), včetně help desk
      • Kliknutím na odkaz v uvítací zprávě na jejich vlastní uživatelské diskusní stránce
      • Otevírání a čtení oznámení
      • Otevření a aktualizace nastavení/předvoleb účtu
      • Ověření nebo přidání/aktualizace e-mailové adresy.
    • Přímo k úpravě: Přejít přímo k úpravám bez čtení mnoha článků nebo jakéhokoli výukového obsahu
      • Může k tomu dojít buď proto, že byl účet vytvořen z prostředí úprav, nebo čtenář otevřel editor z prostředí čtení brzy po vytvoření účtu.
      • Jedná se o vytvoření nové stránky?
      • Při otevření editoru se na některých wikinách zobrazí průvodce nebo GettingStarted. Kliknul uživatel na něco v GuidedTour nebo GettingStarted?
    • Jakákoli kombinace výše uvedeného, ​​jako je pracovní postup, ve kterém si uživatelé přečtou některé články, poté si přečtou stránku nápovědy, po níž následuje spuštění a opuštění úprav, po kterých následuje úspěšná úprava.
  4. Jaké procento uživatelů úspěšně uloží úpravy po zahájení úprav? A pro ty, kteří přeruší své úpravy, co udělají v editoru, než je přeruší?
    • Na jaké stránce probíhá pokus o úpravu?
    • Jak často uživatelé rychle opustí editor, aniž by skutečně vzájemně působili se stránkou?
    • Jak často uživatelé provádějí podstatnou část interakce se stránkou, než ji přeruší?
    • Jak často uživatelé mění typ editoru?
    • Pokud byla úprava uložena, kolik bajtů se v úpravě změnilo?
    • Byla výsledná úprava vrácena zpět nebo poděkována?
  5. Po uložení nebo přerušení úpravy, co se stane dál? (Vraťte se ke kroku 3).

Jiná schémata

Toto je seznam některých dalších schémat EventLogging, která můžeme použít k obohacení obrazu toho, co dělají noví držitelé účtů během prvních hodin na wiki:

Uživatelské toky

 
Kompletní uživatelský pracovní postup od plánování tohoto projektu

Při plánování potřeb měření a analýzy tohoto projektu sestavil návrhář našeho týmu několik vizuálních uživatelských toků, které nám pomáhají zmapovat cestu nových uživatelů během jejich prvních hodin na wiki. Jak je uvedeno na níže uvedených snímcích:

"Následující uživatelské toky dokumentují různé cesty, kterými se mohou nově vytvořené účty na Wikipedii vydat, aby se staly nově 'aktivovaným' editorem (po provedení první úpravy), uchováním (2. úprava) až po 'přežití' (3. úprava během prvních 6 týdnů). Diagramy zaznamenávají požadovaná data, která mají být zachycena při každé interakci s uživatelem, se záměrem pomoci týmu Growth identifikovat různé body pro instrumentaci a také pomoci vizualizovat cestu uchovávání nového editoru."

Ačkoli toky rozšiřují naše myšlení na vícenásobné úpravy na cestě nového uživatele, rozhodli jsme se omezit naše měření pouze na jejich první den.

Celý balíček snímků je zde a také odkaz na tento úkol Phabricatoru. Vpravo je obrázek úplného uživatelského toku, což je hlavní snímek z balíčku snímků. Vezměte prosím na vědomí, že tyto jsou prezentovány jako artefakt myšlení našeho týmu, ale již nejsou aktualizovány, protože náš přístup se neustále vyvíjí. Odstavec Specifikace výše odráží současný přístup.

Analýza

Protože data EditorJourney zaznamenávají mnoho podrobností o tom, co nováčci dělají první den, budeme moci pomocí datové sady klást a odpovídat na mnoho otázek. V tomto smyslu naše analýza nebude nikdy úplná a vždy můžeme použít soubor dat k zodpovězení dalších otázek o nově příchozích. V této části jsou uvedeny analýzy, které byly dokončeny. Členové komunity by měli mít možnost přeložit kteroukoli z těchto zpráv do svých jazyků. Budoucí analýzy se budou nadále zabývat seznamem otázek v odstavci "Specifikace" výše.

  • Zpráva o výsledcích projektu Porozumění prvnímu dni: První zpráva využívající datovou sadu EditorJourney, která se zabývá otázkami, z jakého kontextu nováčci vytvářejí své účty a kolik nováčků dělá jaké činnosti v určitém okamžiku prvního dne. Některé důležité horní linie:
    • Tyto údaje podstatně objasňují naše chápání nově příchozích: Mnoho z nich si všimne dosahu, hledá obsah nápovědy a většina z nich si otevře editor. Je dobrou zprávou, že tolik je zapojených a snaží se uspět, a jasnost nám dává příležitost setkat se s nimi tam, kde jsou, takže když jdou hledat něco užitečného, ​​našli to.
    • Velký počet uživatelů zobrazí stránky nápovědy nebo zásad první den: 41,5 % v češtině a 27,8 % v korejštině.
    • Velký počet uživatelů si první den prohlíží vlastní stránku User nebo User Talk: 33,8 % v češtině a 39,3 % v korejštině.
    • Většina nových uživatelů otevře editor první den – ale asi čtvrtina z nich během této doby úpravy neuloží.