Čtení/Web/Vylepšení počítače/Úložiště/Oddělení obsahu Uživatelské testování
Tým Design Strategy nadace provedl na webu usertesting.com experiment založený na průzkumu. Cílem bylo změřit, jaký vliv – pokud vůbec nějaký – měla navrhovaná aktualizace Zebra #9 na vývoj Vector 2022 na čtenářský zážitek účastníků.
Celkem 219 účastníků bylo požádáno, aby si "přečetli nějaké věci na Wikipedii a odpověděli na některé otázky" o svých zkušenostech. Účastníci byli vystaveni článkům pro San Salvador a Guatemala City v náhodném pořadí. Byli rozděleni do čtyř skupin podle toho, zda viděli článek Guatemala City nebo San Salvador v původním (bílém) vzhledu Vector 2022 nebo ve verzi vzhledu Zebra #9.
Ve většině případů design stránky, který účastníci viděli, významně neovlivnil jejich zážitek ze čtení. Většina účastníků (89 %) uvedla, že si nevšimli rozdílu v designu, když plnili úkoly průzkumu. Navzdory tomu téměř polovina účastníků (48 %) na konci průzkumu dala přednost Zebře #9 před původním Vectorem 2022.
Klíčové poznatky
- Volba verze Zebra #9 vs. původní (bílá) Vector 2022 neovlivnila hodnocení účastníků obou článků. Účastníci hodnotili San Salvador výše než Guatemala City bez ohledu na design a pořadí prezentace.
- Účastníci, kteří viděli jeden článek v původním Vector 2022, poskytli podobná hodnocení jako účastníci, kteří viděli stejný článek ve verzi Zebra #9.
- Většina účastníků (89 %) uvedla, že si při čtení článků nevšimli rozdílu v designu.
- Když se však účastníkům na konci průzkumu ukázal přímý srovnávací snímek dvou návrhů vedle sebe, téměř polovina z nich dala přednost Zebře #9.
- 48 % preferuje verzi Zebra #9, 29 % preferuje původní Vector 2022 a zbytek (23 %) nevyjadřuje žádnou preferenci.
- Účastníci průzkumu neuvedli žádný rozdíl v celkové použitelnosti mezi oběma různými verzemi
Formát průzkumu
Experimentální skupiny
Účastníci byli rozděleni do čtyř skupin podle toho, která města v jakých návrzích viděli. Každá skupina viděla buď San Salvador ve verzi Zebra #9 a Guatemala City v původním Vector 2022, nebo naopak. Každá skupina také viděla buď San Salvador jako první v nástroji, nebo jako první viděla město Guatemala.
| Skupina | Pořadí měst a návrhů v anketě | Počet účastníků |
|---|---|---|
| Guatemala City Zebra #9 | Guatemala City(verze Zebra #9) + San Salvador (původní Vector 2022) | 50 |
| Guatemala City Vector 2022 původní | Guatemala City (původní Vector 2022) + San Salvador (verze Zebra #9) | 50 |
| San Salvador Zebra #9 | San Salvador (verze Zebra #9) + Guatemala City (původní Vector 2022) | 59 |
| San Salvador Vector 2022 původní | San Salvador (původní Vector 2022) + Guatemala City (verze Zebra #9) | 60 |
| Celkem 219 účastníků | ||
Systém filtrování účastníků usertesting.com byl použit k zajištění toho, aby se účastníci každého jednotlivého testu nezúčastnili předchozích verzí testu. (Existovaly čtyři verze průzkumu rozložené do 22 jednotlivých testů usertesting.com s 10 účastníky v každé.) 219 shromážděných odpovědí bylo dále ověřeno unikátní kontrolou, kdy uživatelské jméno každého účastníka usertesting.com se v konečném datovém souboru objevilo pouze jednou.
Zdrojové články
Guatemala City a San Salvador byly vybrány jako zdrojové články, protože:
- jsou si tematicky i obsahově podobná;
- mají úvodní části podobné délky (~250 slov); a
- mají sekce "Doprava", které obsahují informace o autobusech.
Úkoly průzkumu
Účastníci byli požádáni, aby:
- Poskytli demografické informace a informace o používání Wikipedie;
- Prošli si úvodní sekce prvního města;
- Prošli si sekci dopravy a hledali konkrétní informace o autobusech;
- Zopakovali úkoly pro druhé město;
- Uvedli, zda si všimli konstrukčního rozdílu; a
- Vyjádřili přednost pro původní Vector 2022 nebo verzi Zebra #9.
Po prolistování úvodních a dopravních sekcí každého města byly účastníkům položeny následující otázky:
- Jak snadné bylo najít informace o DOPRAVĚ v tomto článku? (Snadné nalezení informací o dopravě)
- Když jste četli článek, jak snadné pro vás bylo zaměřit se na informace? (Snadné zaměření na informace)
- Když jste četli článek, jak snadné bylo přecházet ze sekce do sekce? (Snadná navigace)
- Když jste četli článek, jak hodnotíte celkový zážitek ze čtení? (Celkový zážitek ze čtení)
- Vyjádřete preferenci designu poté, co uvidíte srovnání vedle sebe na konci
Zjištění
Účastníci hodnotí San Salvador výše bez ohledu na verzi designu
U všech otázek týkajících se čtenářské zkušenosti byl San Salvador ohodnocen výše než Guatemala City, bez ohledu na to, zda byl představen v původní verzi Vector 2022 nebo ve verzi Zebra #9. Kromě toho se rozdíly v hodnocení poskytnutém účastníky, kteří viděli město v původní verzi, významně nelišily – až na dvě výjimky – od hodnocení poskytnutého účastníky, kteří viděli stejné město v novém designu.
| město prezentované ve Vector 2022: | San Salvador | Guatemala City | ||
| město | San Salvador | Guatemala City | San Salvador | Guatemala City |
| Hledání informací o dopravě | 4.59 (.73) | 4.34 (1.02) | 4.68 (.57) | 4.52 (.84) |
| Zaměření na informace | 4.27 (.86) | 3.88 (1.04) | 4.37 (.87) | 4.14 (.75) |
| Přesouvání mezi sekcemi | 4.75 (.53) | 4.53 (.85) | 4.75 (.60) | 4.72 (.64) |
| Celkový čtenářský zážitek | 4.29 (.71) | 3.92 (.84) | 4.34 (.71) | 4.16 (.81) |
Ve dvou případech byl původní design Vector 2022 spojen s vyšším hodnocením než verze Zebra #9 pro Guatemala City. Účastníci, kteří viděli město Guatemala v původním Vector 2022, ho hodnotili lépe z hlediska zaměření na informace a celkového zážitku než účastníci, kteří jej viděli ve verzi Zebra #9.
Účastníci vyjadřují, že upřednostňují čtenářský zážitek ze San Salvadoru, bez ohledu na verzi designu
Po dokončení úkolů průzkumu byli účastníci požádáni, aby vyjádřili preferenci pro konkrétní článek na základě celkové zkušenosti se čtením: Porovnání vašich čtenářských zážitků v Guatemala City vs San Salvador, čemu jste dali přednost? 138 účastníků (63 %) vyjádřilo preferenci pro San Salvador, 55 (25 %) preferovalo Guatemala City a 26 (12 %) nevyjádřilo žádnou preferenci. Design, ve kterém účastníci viděli tato města, nebyl spojen s výrazným rozptylem v těchto hodnoceních.
Naprostá většina účastníků si nevšimla, že by oba články měly odlišná vizuální provedení.
Na konci průzkumu a poté, co účastníci již vyjádřili preferenci ohledně celkového zážitku ze čtení v obou článcích, jim byl ukázán obrázek, který přímo porovnával dva návrhy vedle sebe. Všimli jste si, že články Guatemala City a San Salvador měly různé barevné pozadí v designu stránky? Pouze 24 z 219 účastníků (11 %) uvedlo, že si všimli rozdílu v designu před tímto krokem.
Ale když je rozdíl v designu zobrazen na srovnávacím obrázku vedle sebe, účastníci mírně preferují verzi Zebra #9
Když se na konci průzkumu ukázal rozdíl mezi těmito dvěma designy, největší skupina účastníků (48 %) vyjádřila preferenci pro novou verzi Zebra #9.
| Jaký design stránky preferujete? | |
|---|---|
| verze Zebra #9 (šedá) | 105 (48%) |
| původní Vector 2022 (bílá) | 64 (29%) |
| žádná preference | 50 (23%) |
Diskuse
Preference pro San Salvador je pravděpodobně způsobena spíše obsahem článku než výběrem designu
Volba původní verze Vector 2022 vs. Zebra #9 v této studii neovlivnila preference článků účastníků. San Salvador byl u všech skupin trvale hodnocen výše než Guatemala City. Je to pravděpodobně způsobeno několika faktory:
- Designový rozdíl je extrémně jemný a většina účastníků si ho nevšimla;
- Úkoly průzkumu byly formulovány jako vyhledávání informací – účastníkům bylo řečeno, aby si představili, že zvažují cestu do těchto měst, a požádali, aby si prohlédli úvodní části a části o dopravě v obou článcích;
- Nahrávky účastníků budí dojem, že témata probíraná v příslušných sekcích v San Salvadoru byla pro plánování výletů relevantnější než témata probraná v Guatemale City.