Co to je
A/B testování je způsob, jak ověřit, která ze dvou verzí něčeho funguje lépe. Testovat lze nadpis, tlačítko, obrázek, předmět e-mailu nebo celou stránku. Část návštěvníků dostane verzi A, druhá část verzi B, obě verze se ukazují ve stejné době a výsledky se porovnají podle předem stanoveného cíle, například počtu objednávek nebo odeslaných poptávek.
Návštěvníky do skupin rozděluje testovací nástroj náhodně, aby byly skupiny srovnatelné. Pokud se zkouší víc než dvě varianty, mluví se o A/B/n testu.
Proč na tom záleží
Řada rozhodnutí na webu se dělá podle dojmu: „tohle tlačítko je lepší“. Test nahrazuje dohady měřením a chrání před změnami, které by výsledky nezlepšily, nebo je dokonce zhoršily. Výsledek má ale smysl jen tehdy, když test sbírá dost dat a běží dostatečně dlouho. Při malé návštěvnosti bývá rozdíl mezi variantami často jen náhoda, a ne skutečné zlepšení.
Modelový příklad
E-shop s bytovými doplňky chce zjistit, zda víc lidí dokončí objednávku, když je u tlačítka „Do košíku“ vidět informace o dopravě zdarma. Polovina návštěvníků vidí původní stránku, druhá polovina upravenou. Po předem stanovené době se porovná počet dokončených objednávek v obou skupinách.
Co byste měli vědět
- Ideálně měňte jednu věc najednou; čím víc změn je v jedné variantě, tím hůř poznáte, co za rozdílem stojí.
- Určete předem, co je úspěch, a test nevyhodnocujte dřív, než doběhne. Předčasné ukončení ve chvíli, kdy je výsledek náhodou příznivý, často vede k chybným závěrům.
- Obě varianty musí běžet současně, aby je neovlivnila sezóna nebo probíhající akce.
- Zeptejte se dodavatele, jak velký vzorek (tedy kolik návštěvníků) a jak dlouhou dobu test potřebuje a co se bude dít, když výsledek nevyjde jednoznačně.
- I test, který nic nezlepšil, je užitečný: ukáže, co zbytečně neměnit.