Dve verzie predmetu porovnávajte pri rovnakom obsahu a odosielacej ceste. Ak súčasne zmeníte doménu odkazu, čas a segment, neviete výsledok pripísať predmetu. Predmet môže byť súčasťou celkového hodnotenia správy, ale z jedného rozdielneho priečinka nemožno zostaviť univerzálny zoznam zakázaných slov. Najprv určte, či skúmate zrozumiteľnosť pre ľudí alebo technické umiestnenie.
Dve rôzne otázky testu
Marketingový experiment môže skúmať odozvu vybranej skupiny príjemcov, zatiaľ čo kontrolná schránka ukazuje pozorované spracovanie jednej verzie. Tieto výsledky nespájajte do jedného záveru. Oficiálny návod Mailchimpu opisuje A/B premenné vrátane predmetu; dostupnosť a pravidlá konkrétnej funkcie však overte vo svojom účte. Tento článok nestanovuje minimálnu veľkosť vzorky ani garantovanú štatistickú istotu.
- Pripravte verzie A a B s jasným účelom a bez zavádzajúceho sľubu. Zachovajte From, obsah, odkazy a technický spôsob odoslania, pokiaľ práve tieto prvky nie sú predmetom iného pokusu.
- Pri kontrolných adresách zaznamenajte prvotné umiestnenie každej verzie a dostupné overenie. Nemiešajte výsledky po ručnom presune správ s pôvodnou klasifikáciou.
- Ak sa výsledky líšia, preverujte opakovateľnosť a možné rozdiely, ktoré ste prehliadli. Výsledok označte podľa skutočnej vzorky a nepremieňajte ho na zákon platný pre všetky schránky.
Hypotetická zamenená premenná
Obchod skúsi v druhej verzii kratší predmet, ale zároveň vymení ponuku a sledovaciu doménu. Druhá správa dopadne odlišne. Tím z toho nemôže spoľahlivo vyhlásiť, že pomohla iba dĺžka predmetu. Najprv pripraví porovnanie s rovnakým telom a cestou. Ide o hypotetický príklad návrhu pokusu, nie o tvrdenie, že krátke alebo dlhé predmety majú vždy lepšie výsledky.
Pri komunikácii so zákazníkmi zostáva dôležitá pravdivosť a očakávanosť. Predmet napodobňujúci osobnú odpoveď alebo naliehavý servisný problém môže byť zrozumiteľnostným rizikom aj vtedy, keď kontrolná schránka ukáže Inbox. Priečinok nehodnotí sám osebe kvalitu rozhodnutia. Preto nech marketingový vlastník schvaľuje význam a technik oddeľuje dôkaz o prenose a autentifikácii.
Čo uviesť po experimente
Záver pomenujte konkrétne: pri tejto vzorke a tejto zostave sa verzie líšili alebo nelíšili. Uveďte, ktoré premenné boli zachované a čo nebolo pod kontrolou. Ak sa nevie vysvetliť rozdiel, nevyberajte príčinu podľa dojmu. Uchovajte obe prijaté správy pre kontrolu. Bez porovnateľnosti by ďalšia úprava mohla iba opakovať pôvodné miešanie viacerých zmien.
Zdroje a overenie v praxi
Mailchimp: A/B testovanie a premenné
Gmail: odporúčania pre obsah a odosielanie
Otestujte vlastnú správu cez dostupné kontrolné schránky. Ide o pozorovanie vzorky, nie o záruku pre zákazníkov. Rozsah a obmedzenia vysvetľuje metodika testovania. Pokrytie slovenských poskytovateľov si overte v aktuálnom rozhraní.
Súvisiace postupy
HTML a textová časť e-mailu: skontrolujte zhodu ponuky
Nová sledovacia doména: overte celý reťazec odkazu v e-maile