Kliknutí na tlačítko
Verze se mohou lišit předmětem, odesílatelem i samotným obsahem.
Nastavení AB testu:
- Procento příjemců zahrnutých v testovací skupině – nastavte, jak velký má být testovací vzorek příjemců. Neexistuje žádná "ideální" velikost testovacího vzorku příjemců, vždy musíte přihlédnout k aktuální velikosti seznamu příjemců i k aktuálnímu obsahu kampaně. Vždy si propočtěte, jak velký seznam příjemců máte a na kolik příjemců připadně testovací vzorek odejde. Pokud máte např. databázi příjemců se 1000 e-maily a jako testovací vzorek vyberete 40 % adres, bude kampaň v první fázi rozeslána na 400 adres (varianta A bude odeslána na 200 e-mailů, varianta B bude odeslána rovněž na 200 e-mailů) a po vyhodnocení úspěšností testovacích vzorků bude vítězná varianta odeslána na zbytek seznamu příjemců, v tomto případě na 600 e-mailových adres.
- Čas pro vyhodnocení testovací skupiny před finálním rozesláním – nastavte čas potřebný pro vyhodnocení úspěšnosti jednotlivých variant. Minimální čas je 10 min, maximální 4 dny. Při nastavování času vždy berte v potaz celkové množství příjemců i kritérium, dle kterého se bude úspěšnost vyhodnocovat (např. pro čtení bude stačit kratší doba než pro vyhodnocení konverzí).
- Výsledky testovací skupiny vyhodnotit podle:
- Otevření – která z verzí bude rozeslána ve finálním rozeslání, rozhodne u jednotlivých verzí kampaně počet příjemců, kteří prokazatelně otevřou zprávu.
- Unikátních kliknutí – která z verzí bude rozeslána ve finálním rozeslání, rozhodne u jednotlivých verzí kampaně počet příjemců, kteří kliknou na odkaz.
- Poměr kliknutí – poměr mezi otevřenými zprávami a počtem kliknutí rozhodne u jednotlivých verzí o tom, která z verzí bude odeslána ve finálním rozeslání.
- Konverzní poměr – konverzní poměr u jednotlivých verzí rozhodne o tom, která z verzí bude rozeslána ve finálním rozeslání. Nezapomeňte, že na vašich stránkách musí být implementován konverzní kód, aby bylo možné získat údaje o konverzích. Pro správné vyhodnocení konverzí je nutné nastavit dostatečný čas (doporučen alespoň 1 den) pro vyhodnocení.
Vyhodnocení AB testu:
Pokud je kampaň odeslána s AB testem, najdete v reportu její rozesílky také detailní vyhodnocení AB testu.
V tabulce s přehledem „NASTAVENÍ ROZESÍLKY“ najdete základní informace o nastavení AB testu a jeho průběhu:
Kliknutím na červené tlačítko „A|B“ v pravém horním rohu tabulky „NASTAVENÍ ROZESÍLKY“ zobrazíte detailní vyhodnocení AB testu:
První část detailního reportu (STATISTIKY TESTOVACÍ SKUPINY) znovu shrnuje nastavení AB testu (jak velká byla testovací skupina, kdy a na základě jakého parametru byla vyhodnocena první fáze testu).
Druhá část (VÝSLEDKY HODNOCENÍ) ukazuje výsledky v okamžiku hodnocení první fáze AB testu, tedy výsledky těsně před okamžikem, kdy byla odeslána vítězná varianta.
Poslední část (PRŮBĚŽNÉ VÝSLEDKY) ukazuje aktuální vývoj metrik u příjemců z testovací skupiny – jinými slovy, jak by vypadalo vyhodnocení úvodní fáze AB testu v okamžiku, kdy si reportu zobrazíte, tedy pokud by první fáze AB testu běžela delší dobu.
Jak je tedy patrné z obrázku výše – pokud by první fáze AB testu trvala delší dobu (vyhodnocení by proběhlo později), byla by jako vítězná odeslána varianta B.
Ikona „plamínku“ (viz oranžové šipky na obrázku výše) indikuje, že u dané metriky je v porovnání s metrikou nastavenou pro vyhodnocení AB testu signifikantně větší rozdíl ve výsledcích jednotlivých variant a tudíž by příště měla být pro vyhodnocení použita tato metrika.
