A/B testovanie

Čo to znamená

A/B test rozdelí návštevnosť na dve vetvy: jedna vidí pôvodnú verziu, druhá zmenenú. Všetko ostatné zostáva rovnaké, takže rozdiel v konverznom pomere možno pripísať práve tej jednej zmene.

Zmysel má len vtedy, keď je návštevnosti dosť na to, aby rozdiel nebol náhoda. Pri desiatich objednávkach mesačne test nič nedokáže a rozhodovať treba podľa rozhovorov so zákazníkmi, nie podľa čísel.

A/B test nie je porovnanie tohto mesiaca s minulým. Pri porovnaní pred a po sa do výsledku zamieša sezóna, iná reklama alebo výpadok konkurenta. Pri A/B teste bežia obe verzie súčasne na rovnakom publiku, takže vonkajšie vplyvy dopadnú na obe vetvy rovnako a z webovej analytiky sa dá prečítať čistý rozdiel.

Ako to funguje v praxi

Testuje sa jedna vec naraz: nadpis, cena, dĺžka formulára, umiestnenie výzvy na akciu. Ak sa zmení päť vecí súčasne, výsledok síce príde, ale nikto nebude vedieť, ktorá z nich ho spôsobila.

Pri landing page na platenú reklamu sa test oplatí najviac, lebo každé percento konverzie priamo znižuje cenu objednávky. Výsledok sa má merať až po objednávke, nie po kliknutí.

Pri e-shopoch dbáme na to, aby sa výsledok testu dal overiť aj v číslach z účtovníctva. Vetva, ktorá priniesla viac objednávok, ale s vyššou mierou vrátení alebo s väčšou zľavou, nemusí firme zarobiť viac. Porovnáva sa preto aj marža na objednávku a podiel vrátení, nie len počet objednávok v nástroji.

Na čo si dať pozor

Najdrahšia chyba je zastaviť test v momente, keď sa jedna vetva práve zdá lepšia. Prvé dni kolíšu vždy; rozhodovať sa má po vopred určenom počte konverzií, nie po prvom dobrom grafe.

Druhý problém je, kto sa do testu vôbec dostane. Ak nástroj meria len návštevníkov, ktorí prijali cookies, pracuje s výberom, nie s celou návštevnosťou. A ak sa spustí skôr, než návštevník udelí súhlas s cookies, môže to byť porušenie pravidiel ochrany súkromia, teda problém pri kontrole, nie len nepresné číslo.