Remote User Testing experiment

Tvoříme obsáhlou knihovnu znalostí o produktovém vývoji jako součást naší mise. Knihovna slouží všem, kteří se snaží zlepšit v rozhodování, primárně v rozhodování o dalším rozvoji produktu. Ať už jsi vynálezce, produktový manažer nebo Chief Product Officer, používání určitých výzkumných metod a experimentů zvyšuje šanci na vytvoření správných produktů a jejich funkcí pro správné publikum (build the right thing for right audience). Dnes si představíme Remote User Testing validační metodu.

Kdy experiment použít?

Vzdálené uživatelské testování (anglicky Remote User Testing) je vhodné nasadit ve chvíli, kdykoliv v existenci produktu a je třeba ověřit, zda v něm reální uživatelé zvládnou dokončit klíčové úkoly bez asistence. Metoda se hodí především tehdy, když:

  • je potřeba zpětná vazba rychle a ve větším objemu — desítky až stovky testů lze spustit paralelně.

  • cílová skupina je geograficky rozptýlená a osobní setkání by bylo nákladné nebo pomalé.

  • rozpočet ani čas neumožňují moderované testování naživo.

  • předmětem ověření je použitelnost a proveditelnost (feasibility), nikoli touha po produktu nebo ochota platit.

  • je třeba zachytit, jak se uživatelé chovají ve svém přirozeném prostředí, ne pod dohledem výzkumníka.

  • Testovaný produkt už má trakci, uživatele

Základní princip experimentu

Podstatou experimentu je nechat respondenty samostatně projít předem připravenými úkoly nad produktem či prototypem, zatímco se nahrává jejich obrazovka, hlas a reakce. Test je nemoderovaný — respondenta nikdo nevede, oporou je pouze úvodní brief.

  1. Definovat cíl a hypotézu. Vyjasnit, co přesně se testuje a jaký předpoklad se ověřuje.

  2. Připravit úkoly a brief. Formulovat konkrétní úkoly, doprovodné otázky a stručné uvedení do kontextu. Zadání musí být srozumitelné samo o sobě, protože respondent nebude mít koho se zeptat.

  3. Vybrat respondenty a nástroj. Najít účastníky z cílového publika v relevantních komunitách a fórech, nebo přes některou z platforem pro vzdálené testování a zvolit nástroj, který nahraje průběh testování. Mezi nejpoužívanější patří UserTesting, Maze, Lyssna (dříve UsabilityHub), Hotjar pro nahrávky relací a Preely pro testování raných prototypů.

  4. Doručit test. Rozeslat zadání respondentům, kteří úkoly vykonají ve svém vlastním prostředí a čase, zatímco se pořizuje záznam.

  5. Sbírat data. Sledovat míru dokončení úkolů (anglicky task success rate), čas potřebný na úkol, četnost chyb a kvalitativní signály tření, zejména zmatení, váhání, opakované klikání ze frustrace (anglicky rage clicks). Rozhodovací signál: pokud většina respondentů dokončí klíčové úkoly bez pomoci a nevrací se stále stejné překážky, je použitelnost potvrzena; pokud naopak řada lidí selhává na témže kroku, je třeba návrh přepracovat a otestovat znovu.

  6. Identifikace rizik. Nemoderovaný formát neumožňuje doptat se nebo upřesnit zadání, takže nejasnosti zůstanou nevyřešené. Respondenti mohou test předčasně opustit a vyžadují vlastní motivaci jej dokončit. Uměle zadané úkoly nemusí odpovídat reálnému použití. Malé vzorky dávají směrová, nikoli robustní zjištění, a najatí testeři ne vždy přesně odpovídají cílovému publiku.

Reálná ukázka experimentu

Odkaz na reálný výzkum: KeyBank + UserTesting

Americká banka KeyBank přidala softwarovým upgradem do svých bankomatů dotykové obrazovky, ale po stranách displeje zůstala už nefunkční fyzická tlačítka. Klienti je dál mačkali, nechápali změnu a spokojenost měřená skóre NPS (Net Promoter Score) klesla.

Místo nákladné výměny hardwaru provedlo interní Key Design Studio s pomocí platformy UserTesting výzkum přímo na pobočkách, kde reální klienti procházeli úkoly nad novými čelními panely a obrazovkami pro výběr nominálů a tým podle zpětné vazby návrh opakovaně ladil. Vylepšení banka nasadila napříč flotilou 40 000 bankomatů během necelých dvou měsíců a zvedla NPS o 44 %.

Co vše se dá experimentem testovat?

Hlavní silou metody je odhalit, kde reální uživatelé v produktu narážejí — a to rychle, levně a na větším vzorku, než dovolí moderované testování. Konkrétně se hodí ověřit:

  • Použitelnost klíčových toků: zda uživatelé dokončí stěžejní úkol (registraci, nákup, odeslání formuláře); signálem je vysoká míra dokončení bez asistence.

  • Místa tření (anglicky trigger points): kde se uživatelé zaseknou, váhají nebo zuřivě klikají; signálem je opakování stejné překážky napříč respondenty.

  • Srozumitelnost rozhraní a textů: zda lidé chápou popisky, tlačítka a navigační pojmy; signálem je správná interpretace bez tázání.

  • Informační architekturu a navigaci: zda uživatelé najdou funkci tam, kde ji hledají; signálem je nalezení cesty bez bloudění.

  • Proveditelnost prototypu před vývojem: zda koncept obstojí v reálném použití dřív, než se do něj investuje čas vývojářů.

  • Srovnání variant návrhu: která verze toku či obrazovky vede k vyšší úspěšnosti; signálem je rozdíl v dokončení mezi variantami.

Jiné označení pro experiment

  • Unmoderated remote usability testing

  • Remote usability testing

  • Unmoderated usability testing

Související články