Největší chyba v A/B testování. Čtěte dál.

Chcete mít web s vysokou mírou konverze? Každý to chce. Ale mnoho lidí dělá tuto chybu. Chybu, která je zavádí a vede ke smutnému výsledku.

Kluci z Popcorn Metrics udělali tuto chybu v A/B testování. A aby pomohli ostatním vyhnout se problémům, napsali o tom článek. A my jsme ho rychle přeložili, abychom vás před touto chybou varovali! Představme si situaci. Provádíte A/B testování webových stránek. Máte dvě verze – původní a testovací. V důsledku testování získáte následující výsledky: konverze na registraci na původní stránce je 2.3 %, v testovací verzi – 3.2 %. Která z těchto stránek vyhrála experiment? Samozřejmě, testovací stránka je efektivnější. S tím v této fázi nemůžeme nesouhlasit. Proč? Protože čísla nelžou. 3.2 % je více než 2.3 %. A tady začíná ta zábava. Když lidé provádějí A/B testování, zaměřují se pouze na jednu fázi prodejního trychtýře. V našem příkladu – na konverzi na registraci. Zdálo by se, v čem je problém? Všude vás učí, abyste si při vytváření A/B experimentu zvolili konkrétní cíl a na základě něj vyhodnotili výsledek. Ale téměř nikde se nepíše, že je potřeba hledat dál, hlouběji. Koneckonců, existují i další fáze prodejního trychtýře. Ve vašem případě se v testovací verzi zaregistrovalo více uživatelů. To je skvělé. Ale jak se chovali dál? Jak se konvertovali na platící uživatele? Tato otázka je mnohem důležitější. To je ten problém. Téměř nikdo nehodnotí dopad A/B experimentu na celý prodejní trychtýř, počínaje první fází, kterou jste se tímto testem snažili vylepšit, a konče poslední fází – například nákupem. Nyní pokračujme v tomto experimentu. Přestože testovací verze stránky měla více konverzí k registraci, počet prodejů v původní verzi byl vyšší. Teď to není tak zřejmé? Už nemůžete souhlasit s tím, že testovací verze vyhrála A/B experiment. Co je pro vás důležitější: zvýšení počtu konverzí v první fázi prodejního trychtýře, nebo vylepšení celého prodejního trychtýře tak, aby více uživatelů dosáhlo konečného cíle?

Související článek – 10 nejčastějších chyb v A/B testování

Varování! Pokud je vaším cílem při A/B testování zvýšit konverzi pouze v jedné konkrétní fázi, například ve fázi registrace, bez ohledu na to, jak to ovlivní celý prodejní trychtýř a váš příjem, pak můžete přestat číst. Pokud ale hledáte „dál“ a chcete dělat správné a efektivní A/B testy, zůstaňte s námi a my vám řekneme a ukážeme, jakou chybu udělali kluci z Popcorn Metrics. Možná ji děláte právě teď a ani o tom nevíte.

Případová studie Popcornmetrics

Podívejme se na prodejní trychtýř projektu Popcorn metrics. Má 5 fází, počínaje registrací ve službě (Registrovat) a konče umístěním kódu (Publikovat), a můžete vidět, jaký je konverzní poměr z jedné fáze do druhé. Hlavním úkolem je v tomto případě dovést potenciálního klienta do poslední fáze, kdy umístí sledovací kód na svůj web.

Související článek – 10 úspěšných případů A/B testování

Když se potenciální klient ocitl na domovské stránce Popcorn Metrics, byl požádán o zadání odkazu na jejich webové stránky. Po vložení odkazu a kliknutí na tlačítko „Vyzkoušet“ se otevřel vizuální editor (Playmode). V tomto vizuálním editoru si můžete prohlédnout, jak služba funguje, i bez registrace. To se provádí s cílem co nejrychleji ukázat výhody služby, aniž by byl potenciální klient nucen se registrovat. Nejprve hodnota a poté povinnost – registrace pro zkušební verzi produktu. Účinnost této funkce byla ověřena v předchozích experimentech. Bylo rozhodnuto v experimentech pokračovat a přidat možnost zhlédnutí 2minutového videa v testovacích možnostech. V první možnosti bylo video přidáno přímo na domovskou stránku. Ve druhé – textový odkaz na video. Byl spuštěn experiment s využitím Google Analytics. Hlavním cílem byla „Registrace“ – 1. fáze prodejního trychtýře. Po experimentu se ukázalo, že v 1. testovací verzi s vloženým videem (Varianta 1 – Playmode & Video Image) byla konverze na registraci 3.20 %. A to byl nejlepší ukazatel ze všech tří verzí. Vítězem tohoto experimentu je tedy první testovací varianta. Měla o 40 % vyšší míru konverze než ostatní dvě varianty. A právě zde se skrývá největší chyba.

Podívejte se na výsledky experimentu ve všech fázích prodejního trychtýře

Když v Google Analytics spouštíte experimenty, máte možnost zobrazit výsledky experimentu napříč všemi cíli, které jste si stanovili. To znamená, že i když jste si jako hlavní cíl – první fázi prodejního trychtýře – zvolili „Registraci“ – můžete sledovat dopad experimentu i na další cíle.

Související článek – Jak provést Split test: 13 nezbytných kroků

Kluci z Popcorn Metrics jednoduše přidali další cíl pro analýzu experimentu – Publikovat. Pro případ, že byste zapomněli, je to konečný cíl v prodejním trychtýři. A nakonec se ukázalo, že náš pseudovítěz (Varianta 1) má pro tento cíl nejnižší míru konverze. A původní verze stránky má nejvyšší. V testovací verzi s videem na stránce se tedy lidé registrovali častěji, ale zároveň téměř 2.5krát méně často dosáhli konce prodejního trychtýře. Proč se to stalo? Když potenciální klient začíná seznámení se službou prostřednictvím vizuálního editoru, vytváří si jednu specifickou uživatelskou zkušenost. Když přes video, vytváří si jinou zkušenost. Na tom závisí následné akce. Další zajímavý závěr byl učiněn také pomocí analytiky. Ti, kteří video sledovali poprvé, vizuální editor testovali jen velmi zřídka (v 9.62 % případů). I když bylo video velmi poutavé a uživatelé se na něj dívali, nezaujalo je tolik jako vizuální editor, což vedlo k tomu, že nekonvertovali do dalších fází prodejního trychtýře.

Jaké ponaučení si z tohoto případu vzít?

Provádět A/B experiment a analyzovat pouze jeden cíl, aniž byste věnovali pozornost celému prodejnímu trychtýři, je velmi nebezpečné. Můžete dojít ke špatnému závěru, který se na první pohled bude zdát správný. Pokud se ale podíváte hlouběji, všechno se ukáže jinak. Jen si to představte. Provedli jste experiment, udělali tuto chybu a pokračovali v testování dalších prvků webu v závislosti na výsledcích tohoto testu. Ukazuje se, že všechny další experimenty vás ještě více zavedou do omylu a pak bude těžké pochopit, co se pokazilo, proč konverze v první fázi roste a tržby klesají. Nyní víte o největší chybě v A/B testování, které se mnoho lidí stále dopouští a ani si to neuvědomuje. Buďte chytří, testujte správně!

Moje největší chyba je, že se upínám k lidem, kterým je na mně úplně fuk.

Největší chybou je naivně věřit, že největší chybu jste už udělali.

– Zlatíčko, víš, jaká je tvá největší chyba v posteli?
– Který, drahý?
– Jsi velmi chudý/á.

Příliš často se k lidem připoutám, je načase, abych se s tímhle sračkami zbavil.

Nejčastější chyba, které se dívky dopouštějí při komunikaci s kluky: zbavují se písniček, ne váhy.

Velkou chybou jakékoli autority je, že si myslí, že se jí někdo ptá. Až jí to někdo řekne.
© Winston Churchill

Největší studentská lež: „Seznam použité literatury.“

Největší lež v mém životě je moje zpráva ze stáže.

Největší břemeno v našem životě je deka v 6 hodin ráno.

Státní duma Ruska má největší pečeť na světě s nápisem: „Souhlasím“.

Největší výhodou policejního oddělení města Uchryupinsk je stín.

— Děláte si starosti?
– Ano.
– Poprvé?
– Ne, už jsem se bál.

Pokud se k vám někdo náhle stal laskavým a milým, buďte si jisti, .

vtipy o Rusovi a Němci
vtipy o sankcích
Co kdyby všichni na firemním večírku říkali pravdu?

Největší rozdíl mezi kanály je pravděpodobně v předpovědích počasí.

Lidé, kteří jsou neustále zaneprázdněni, obvykle nedělají nic.

Penzijní fond je největší finanční pyramida. Všichni investují peníze, ale dostávají je jen ti, co přežili!

Největší paniku zaznamenal občan Ivanov, kterému kamarád ukázal test se 14 proužky.

Miško, Miško, kde máš spořitelní knížku?
Plný červoňců a rublů?
Nejabsurdnější chyba, Miško,
Že je utratíte za b.

Největší lež, kterou si můžete říct, je: Tohle si nezapíšu, to si zapamatuji.

Život je příliš krátký na to, abyste pili mizernou kávu a trpěli kvůli lidem, kterým je na vás úplně lhostejno.

Nevěřím lidem, kteří ráno nemusí nikam chodit, ale stejně vstanou; je s nimi evidentní, že je něco v nepořádku.

– Moje žena je jako zeď!
– Tak velký a plochý?
– Ne, je tam hodně sádry.

Největší problém pro mě ve vztazích s muži je, že moc dobře vím, že můžu být šťastná i bez nich.

Naše největší drama je, že na začátku téměř vždy víme, co se stane na konci, ale to nás nezastaví.

Největší silou muže je milující žena. Je jeho ctí, vírou i důstojností!

Největší ruskou hádankou jsou plněné koláče. Hádejte, na které straně koláče se schovává a co to je: zelí, marmeláda nebo maso.

– Fotka s hroznýšem! Pojďme se vyfotit s hroznýšem!
— Nemyslíš, že je mrtvý?
– Churchkhela! Největší churchkhela!

— Jaká je nejmenší částice ve vesmíru?
– Můj plat.

Vždycky oslovuji lidi, kteří jsou mnohem starší nebo tlustší než já, jako „ty“. Je těžké nerespektovat lidi, kteří si myslí, že jsem dost mladý na to, abych byl jejich dítětem nebo jídlem.

Největší trik, který vaše tělo dokáže, je, že jakmile si vybudujete svaly, musíte je trénovat, dokud nezemřete, jinak ochabnou.
Tlustý by ti to nikdy neudělal.