Test Market experiment

Tomáš Veselý - podpořen AI
před 2 dny
Minut čtení: 3

Tvoříme obsáhlou knihovnu znalostí o produktovém vývoji jako součást naší mise. Knihovna slouží všem, kteří se snaží zlepšit v rozhodování, primárně v rozhodování o dalším rozvoji produktu. Ať už jsi vynálezce, produktový manažer nebo Chief Product Officer, používání určitých výzkumných metod a experimentů zvyšuje šanci na vytvoření správných produktů a jejich funkcí pro správné publikum (build the right thing for right audience). Dnes si představíme Test Market validační metodu.

Kdy experiment použít?

Test Market metoda je vhodná ve chvíli, kdy hlavní náklady produktu neleží ve vývoji jeho základní funkčnosti, ale v jejím rozšíření na velký trh. Místo plošného startu se produkt nejprve nasadí na úzce vymezený segment cílového trhu.

Většina nákladů a rizika leží ve škálování, nikoliv ve stavbě vlastního produktu.
Existuje reprezentativní podmnožina trhu — geografie, demografie nebo segment podle chování — jejíž reakci lze rozumně promítnout na celý trh.
Plošný start by byl drahý nebo obtížně vratný a je třeba potvrdit poptávku dřív, než se do něj investuje.
Cílem je nasbírat reálná data o chování, nikoliv pouze deklarovaný zájem.

Základní princip experimentu

Podstatou experimentu je doručit hlavní funkce produktu, ale jeho rozsah a měřítko vědomě omezit na malý, pečlivě vybraný segment trhu. Tím vznikne kontrolované prostředí, ve kterém lze poptávku a chování pozorovat dřív, než se nasadí naplno.

Definovat hypotézu. Vyjasnit, jaký předpoklad o trhu se testuje a jaký výsledek by ho potvrdil nebo vyvrátil.
Vybrat reprezentativní segment. Zvolit takový segment trhu — město, region, demografickou skupinu — jehož reakce dokáže rozumně předpovědět chování širšího publika.
Doručit jádro produktu. Poskytnout klíčové funkce finálního produktu, ale podpořit jimi pouze vybraný segment; zbytek trhu zatím zůstává mimo.
Sbírat data. Sledovat, jak segment produkt reálně používá. U této metody dávají smysl především akvizice, aktivace, zákaznická zpětná vazba a náklady. Rozhodovacím signálem k plošnému rozšíření je situace, kdy vybraný segment produkt přijme a udrží si ho v takové míře, že po promítnutí na celý trh ospravedlní náklady na škálování — tedy slušná penetrace cílového segmentu při stabilní ceně za získání uživatele. Slabé přijetí nebo rostoucí jednotkové náklady jsou naopak signálem k iteraci nebo pivotu.
Identifikace rizik. Hlavním rizikem je nereprezentativní segment, který vede k falešně pozitivnímu i falešně negativnímu závěru. Lokální síťové efekty se nemusí přenést na jiný trh, malé měřítko může zakrýt skutečné náklady na škálování a regionální regulační či kulturní specifika mohou výsledky zkreslit. Vzorek je směrodatný, ne robustní — přecenit ho je snadné.

Metoda bývá zaměňována s Beta testingem, protože oba pracují s omezenou skupinou uživatelů. Liší se ale otázkou, na kterou odpovídají. Beta testing ověřuje připravenost a kvalitu produktu, zda je feature-complete verze bez kritických chyb připravená na veřejné spuštění; omezený je u něj jen přístup, samotný produkt je kompletní a cílem je spustit ho pro všechny.

Test Market naopak ověřuje trh — zda o produkt je poptávka a zda ekonomika dává smysl při škálování; vědomě omezuje rozsah a měřítko, protože hlavní náklad leží právě ve škálování.

Beta testing proto přichází pozdě, těsně před veřejným uvedením, a dává Go/No-go na spuštění. Test Market může přijít dřív a teprve rozhoduje, zda a jak se na širší trh vůbec škálovat — případně i pivot.

Reálná ukázka experimentu

Odkaz na reálný výzkum: The History of Facebook: From Dorm Room to Global Stage

Facebook je učebnicovou ukázkou principu „nejdřív lokálně, pak globálně". Když Mark Zuckerberg 4. února 2004 spustil TheFacebook, přístup měli výhradně studenti Harvardu. Šlo o jediný, pečlivě vymezený trh, na kterém se ověřovalo, zda o produkt vůbec bude zájem.

Signál přišel rychle. Během prvních 24 hodin se registrovalo přes 1 200 studentů a do konce prvního měsíce byla na síti více než polovina harvardských vysokoškoláků. Teprve s tímto důkazem poptávky se produkt začal rozšiřovat — v březnu 2004 na Columbii, Yale a Stanford, kampus po kampusu.

Postup se osvědčil: do prosince 2004 měla síť přes milion registrovaných uživatelů. Místo plošného startu pro kohokoliv Facebook ověřil chování na jednom úzkém segmentu a teprve ověřený model škáloval dál.

Co vše se dá experimentem testovat?

Hlavní silou metody je ověřit reálné chování trhu v malém měřítku dřív, než se rozhodnutí stane drahým a obtížně vratným. Konkrétně se hodí na:

Skutečná poptávka: zda o produkt na reálné trhu je zájem; signálem je penetrace a udržení v rámci vybraného segmentu, ne jen deklarovaný zájem.
Provozní a technická proveditelnost: zda produkt obstojí při reálném používání; signálem je stabilní provoz a aktivace bez kritických chyb na malém vzorku.
Ekonomika škálování: zda jednotkové náklady a cena za získání uživatele drží na úrovni, která po rozšíření dává smysl.
Chování uživatelů a retence: zda se uživatelé vracejí a produkt si osvojují, nebo po prvním vyzkoušení odpadají.
Lokální třecí body: zda výsledky nezkreslují regionální regulační, jazyková nebo kulturní specifika, která se na jiném trhu projeví jinak.
Marketingové kanály a sdělení: které kanály a jaké sdělení v reálném trhu fungují, než se za ně zaplatí v plném rozsahu.