Jestli Vám na nějakém tom milionu nezáleží, testovat nemusíte
Moudrost se naštěstí rozdávala po troškách, a tak ji nikdo nesnědl všechnu. Výsledkem je, že ani návrháři uživatelských rozhraní pro webové aplikace nevědí všechno. Naštěstí mají po ruce nástroje, kterými svoje díla mohou ještě vylepšit. Jedním z nich je bezesporu metoda A/B testování.
Při tomto druhu testování vytvoříte dvě verze testovaného objektu (formuláře/reklamy/banneru/stránky)a náhodně je pouštíte Vašim uživatelům v ostrém provozu. Velmi rychle zjistíte, která z verzí má lepší výkon. V úplně jasné formě se s A/B testováním můžete setkat kupříkladu v PPC systémech, kde ke skupině klíčových slov dáváte různé textace inzerátů. U textových inzerátů je to poměrně jednoduché, ale co v případě, že potřebujete otestovat třeba rozhraní e-shopu? Vytvořit dvě verze může být finančně dosti náročné, a tak je na místě si položit otázku, zda se to vůbec vyplatí. Takže počítejte se mnou na reálném příkladu z praxe. Jedná se o e-shop s elektro zbožím patřící k jedněm z největších na české scéně:
- Náklady na vytvoření dvou variant rozhraní, implementaci a sledování výsledků se vyšplhají u větších projektů klidně ke 100.000 Kč.
- Klíčovým parametrem pro posouzení obou verzí byl konverzní poměr, respektive obrat.
- Testovací období 14 dnů ukázalo statisticky významnou odchylku mezi verzemi 0,38 procentních bodů. Zdá se vám to málo? Při konverzi okolo 3,5 % to je nárůst výkonu o 11%.
- Vzhledem k objemu prodejů se náklady na testování vrátí díky zvýšenému obratu během jednoho, maximálně dvou měsíců.
Připadá Vám, že se testování vyplatí? Mně rozhodně také, zvláště když vím, že mezi testovanými verzemi byl poměrně malý rozdíl, který se na první pohled nezdál nijak významný. Takže si můžete položit otázku: vyplatí se otestovat i váš e-shop?
Komentáře
ejdamd
22. 7. 2009Díky za zajímavý článek. Pro mě i poučný.
Windows 7
22. 7. 2009Díky za článek.
Edie - referáty
23. 7. 2009Co si máme představit pod „malé rozdíly“?
bubak
24. 7. 2009Objem prodeju, ale nic nerika o tom kolik je zisk, respektive cisty zisk z dane kampane/upravy stranky. Kdyz si vemu ze takovy internetovy elektro obchod by mohl mit marzi do 10 % at se to dobre pocita.
1. musim prodat vyrobky bratru za 1 000 000 Kc, ale …
2. rozdil mezi dobrou a spatnou kampani je 11%, jestli to chapu spravne
3. coz by znamenalo ze musim prodat zbozi v cene o 10 000 000 vice nez pred kampani/zmenou + nejake „drobne“ aby se pokryly naklady na kampan, atp. a ja z toho zacal mit nejky realny zisk
Je ta uvaha spravna? Pokud ne, je mozne pridat nejakou tabulku, kde bude videt prinos. Jako priklad uvedme takovy jiz vetsi eshop, ktery ma obrat 5 000 000/mesic a marze fiktivnich vyrobku je 10%, a nebudeme do toho motat veci jako reklamace, nevyzvednute zbozi, atp. Otazka zni, o kolik mi budou muset stoupnout prodeje, aby se mi vyplatila investice 100.000?
== A ted jen takove drobnosti ==
Asi se shodneme, ze vzhled/rozlozeni prvku na strance je zvykova zalezitost, a ve stredne a dlouhodobem horizontu to nema vliv na prodeje. Ty klicove veci u eshopu jsou jine, a to:
– funkcni stranky
– znamost znacky/obchodu
– cena
– serioznost (maji skutecne zbozi skladem, objednavky nezpozduji, atp.)
– funkcni reklamace (rychle, bez vymluv, …)
– funkcni a kvalifikovana infolinka => kontakt se zakzniky
Rrx
24. 7. 2009ad „malé změny“. No rozhodně bych od nich neočekával 10% rozdíl v konverzi. Převážně takto: barvy modrá o proti žluté, o několik procent větší obrázky, drobné změny v umístění tlačítek.
Podstatné je, že na první pohled se oba designy významně nelišily.
Rrx
24. 7. 2009to bubak: počítáte sptávně.Tohle byl opravdu větší shop. Takže se náklady na změny opravdu vrátili do dvou měsíců.
Ovšem pozor nejednalo se o úpravu pro kampaň, ale o úpravy, keré jsou trvale používané (tedy klidně to je aplikovatelné i u menších shopů).
Krom toho 10% marže… no jak kdo.