Pentru a testa corect două subiecte de email, trimite același mesaj unor grupuri comparabile, repartizate aleatoriu, schimbând numai subiectul. Stabilește înainte ce rezultat urmărești, cât timp îl observi și cum vei decide dacă diferența este suficient de convingătoare. O variantă cu mai multe deschideri nu este automat cea mai bună pentru obiectivul campaniei.
Testarea A/B este utilă când ai o întrebare precisă despre felul în care abonații înțeleg o promisiune. De exemplu, poți compara un subiect care anunță conținutul unui ghid cu unul care descrie problema rezolvată de acel ghid. În ambele cazuri, emailul trebuie să livreze aceeași informație reală. Nu testezi cât de mult poți exagera ca să obții atenție.
Acest articol propune o procedură pentru echipe mici, magazine online și firme de servicii. Toate subiectele, firmele și rezultatele numerice de mai jos sunt ilustrative. Nu reprezintă performanțe obținute de o agenție sau praguri universale pe care ar trebui să le atingă o campanie.
Începe cu decizia pe care vrei să o îmbunătățești
„Vrem un subiect mai bun” este prea vag. O întrebare mai utilă ar fi: „Abonații interesați de amenajarea biroului reacționează mai bine la un ghid anunțat direct sau la formularea unei dificultăți concrete?”. Răspunsul poate influența felul în care scrii newsletterele educaționale următoare, nu doar un singur titlu.
În exemplul nostru, un magazin fictiv de accesorii pentru birou pregătește un email cu un ghid despre organizarea cablurilor. Mesajul include aceeași introducere, aceleași imagini și un singur îndemn principal către ghid. Publicul este format din abonați care au ales să primească idei despre amenajarea spațiului de lucru.
Ipoteza ar putea suna astfel: „O formulare care descrie dezordinea de sub birou va atrage mai multe vizite relevante către ghid decât anunțarea neutră a materialului”. Cuvântul „relevante” contează. Dacă oamenii deschid emailul fiindcă presupun că primesc o reducere, dar găsesc doar un articol, testul poate recompensa o așteptare greșită.
Scrie și decizia posibilă: dacă apar dovezi suficient de clare, vei folosi abordarea mai potrivită în alte mesaje educaționale asemănătoare. Nu vei aplica automat aceeași regulă confirmărilor de comandă, notificărilor administrative sau tuturor campaniilor promoționale.
Construiește variante care testează o diferență identificabilă
Pentru exemplul ilustrativ, varianta A este „Ghid practic pentru organizarea cablurilor de la birou”. Varianta B este „Cabluri încurcate sub birou? Începe cu acești pași”. Ambele promit același material. Diferența principală este unghiul: descrierea resursei versus recunoașterea unei probleme.
O comparație între „Ghid pentru cabluri” și „Reducere de 30% doar astăzi” ar schimba și oferta, nu doar formularea. Chiar dacă subiectele ar putea fi introduse în același instrument de testare, rezultatul nu ar răspunde întrebării inițiale. Ai amesteca interesul pentru conținut cu interesul pentru preț.
Păstrează același nume al expeditorului, aceeași adresă de trimitere, același text de previzualizare și același corp. Dacă modifici și imaginea ori butonul, nu mai poți spune că subiectul a produs singur diferența. Un test mai complex poate fi legitim, dar trebuie formulat și interpretat ca atare.
În documentația Mailchimp despre testele A/B, subiectul este una dintre variabilele disponibile, alături de expeditor, conținut și momentul trimiterii. Accesul la funcție depinde de plan. Verifică opțiunile contului înainte să proiectezi un experiment care presupune automatizări pe care platforma ta nu le oferă.
Alege publicul înainte de împărțirea în grupuri
Definește cine poate primi mesajul. În cazul magazinului fictiv, criteriul este interesul declarat pentru organizarea biroului și eligibilitatea pentru newsletter. Nu introduce în test persoane care s-au dezabonat sau adrese adunate pentru un scop diferit. Obiectivul este să înveți despre publicul relevant, nu să mărești artificial lista.
După stabilirea publicului, repartizează aleatoriu contactele între variante. Nu trimite A clienților vechi și B abonaților noi, apoi atribui diferența subiectului. Cele două grupuri ar porni cu relații diferite față de brand. Nici împărțirea alfabetică nu este o alternativă bună la repartizarea aleatorie.
Dacă există diferențe importante între categorii de abonați, poți testa separat în fiecare categorie, cu condiția să ai suficiente date pentru interpretare. De exemplu, cumpărătorii recurenți și persoanele care nu au cumpărat încă pot necesita analize distincte. Nu fragmenta însă o listă mică în atât de multe grupuri încât fiecare rezultat să se bazeze pe câteva acțiuni.
Păstrează o evidență a repartizării și evită ca aceeași persoană să primească ambele variante. Dacă trimiți două campanii obișnuite în locul funcției dedicate de testare, riscul de suprapunere trebuie controlat explicit. O dublă trimitere schimbă experiența abonatului și poate compromite comparația.
Decide ce înseamnă un rezultat bun
Pentru un email educațional, poți urmări proporția destinatarilor care apasă pe legătura principală către ghid. Pentru o invitație, rezultatul relevant poate fi înscrierea. Pentru un mesaj comercial, poate fi comanda confirmată, cu o perioadă de observare potrivită. Alege un indicator principal și păstrează ceilalți ca explicații sau limite.
Subiectul influențează începutul interacțiunii, dar campania are un scop mai larg. De aceea, merită să verifici dacă avantajul aparent la deschideri continuă către acțiunea dorită. Un subiect care atrage curiozitate fără legătură cu mesajul poate produce mai multe deschideri și puține vizite utile.
Stabilește clar numitorul. „Rata clicurilor” poate fi interpretată greșit dacă o persoană folosește destinatarii livrați, iar alta doar deschiderile înregistrate. Pentru exemplul nostru, calculul principal este numărul destinatarilor unici cu clic pe ghid împărțit la numărul mesajelor livrate în grup. Notează această definiție în fișa testului.
Mailchimp explică în documentația ratelor de deschidere și clic că deschiderile depind de încărcarea unei imagini de urmărire, iar acest mecanism are limite. Nu interpreta deschiderea înregistrată ca dovadă sigură că o persoană a citit mesajul sau a înțeles oferta.
Controlează activitatea automată înainte să compari variantele
Unele deschideri și clicuri pot proveni din sisteme automate, inclusiv scanări de securitate. Mailchimp descrie această problemă și opțiunile de filtrare în ghidul despre activitatea roboților. Folosește aceeași metodă de filtrare pentru ambele grupuri și consemnează setarea utilizată.
Nu compara un raport filtrat cu unul nefiltrat și nu prezenta diferența drept evoluție a interesului. Dacă modifici setările de raportare între campanii, istoricul poate deveni greu de interpretat. Înainte să tragi concluzii, verifică dacă măsori același lucru în ambele situații.
Nici filtrarea nu transformă raportul într-o imagine perfectă a comportamentului uman. Privește rezultatele împreună cu acțiunile din pagina de destinație și cu eventualele răspunsuri reale la email. Dacă toate linkurile par accesate imediat după trimitere, fără activitate ulterioară coerentă, investighează datele înainte să rescrii strategia editorială.
Pentru testul nostru, clicul pe ghid este mai apropiat de scop decât o deschidere, dar rămâne un indicator care trebuie verificat. Succesul nu se stabilește prin alegerea celui mai mare număr din interfață, ci prin legarea indicatorului de comportamentul pe care ai vrut să îl încurajezi.
Pregătește măsurarea paginii de destinație
Verifică linkul din fiecare variantă înainte de trimitere. Ambele trebuie să ducă la același ghid, disponibil public și lizibil pe telefon. Dacă o variantă ajunge la o pagină greșită sau mai lentă din cauza unei erori de adresă, testul nu mai compară doar subiectele.
Pentru identificarea traficului în Analytics, poți utiliza parametri UTM consecvenți. Documentația Google despre URL-urile de campanie explică rolurile sursei, mediului, campaniei și parametrului utm_content. În exemplul ilustrativ, sursa poate fi newsletter, mediul email, campania ghid_cabluri, iar variantele pot fi diferențiate prin subiect_a și subiect_b în parametrul de conținut.
Aceste etichete descriu variantele, nu trebuie să conțină nume, adrese de email sau alte date despre destinatari. Testează dacă parametrii sunt păstrați până la pagina finală și dacă raportarea campaniei funcționează. Un clic în platforma de email și o sesiune în Analytics nu sunt unități identice, deci nu te aștepta la egalitate perfectă.
Dacă pagina urmărește o înscriere sau o cerere, confirmă și funcționarea formularului. Articolul despre conținutul unei pagini pentru cereri de ofertă poate ajuta la verificarea pasului următor. Un subiect bine formulat nu repară un formular defect sau o promisiune neclară în destinație.
Stabilește durata și regula de oprire înainte de trimitere
Alege un interval în care publicul are timp rezonabil să reacționeze și aplică-l identic ambelor variante. Un newsletter trimis către profesioniști poate fi citit după terminarea întâlnirilor, nu în primele minute. Un mesaj despre o ofertă cu termen scurt are alt context. Nu există o durată potrivită pentru orice listă și orice obiectiv.
Nu opri testul imediat ce una dintre variante trece în față. La început, câteva acțiuni pot modifica mult procentajele. Dacă verifici permanent rezultatul și închei doar când apare diferența dorită, riști să alegi o fluctuație întâmplătoare drept concluzie. Notează de la început când se face analiza.
Dacă instrumentul trimite automat varianta câștigătoare către restul listei, verifică indicatorul și intervalul pe care le folosește. Alegerea automată poate fi convenabilă operațional, dar eticheta „câștigător” nu explică singură soliditatea rezultatului. Dacă datele sunt puține sau contradictorii, alegerea manuală și consemnarea incertitudinii pot fi mai potrivite.
Citește un rezultat ilustrativ în cifre absolute și procente
Să presupunem că fiecare variantă are 1.000 de mesaje livrate. Varianta A înregistrează 30 de destinatari unici cu clic pe ghid, iar B înregistrează 38. Ratele sunt 3% și 3,8%. Diferența absolută este de opt persoane și 0,8 puncte procentuale; creșterea relativă este de aproximativ 26,7%.
| Indicator ilustrativ | Varianta A | Varianta B |
|---|---|---|
| Mesaje livrate | 1.000 | 1.000 |
| Destinatari unici cu clic pe ghid | 30 | 38 |
| Rata clicurilor pe ghid | 3% | 3,8% |
| Înscrieri ulterioare confirmate | 4 | 3 |
Titlul „B aduce cu 26,7% mai mult interes” ar ascunde o parte importantă a situației. În acest exemplu, diferența provine din opt clicuri suplimentare, iar înscrierile sunt puține și nu urmează aceeași direcție. Tabelul nu stabilește singur semnificația statistică și nu permite promisiunea că avantajul se va repeta la următoarea trimitere.
Dacă obiectivul declarat era vizitarea ghidului, B are rezultatul observat mai mare pentru acel indicator. Dacă obiectivul principal era înscrierea, nu schimba după test criteriul doar fiindcă rata clicurilor arată mai bine. Poți nota un semnal favorabil pentru accesarea conținutului și un rezultat încă neconvingător pentru înscrieri.
Pentru decizii importante, estimează necesarul de date înainte de lansare, pornind de la rata obișnuită și de la diferența minimă pe care merită să o detectezi. Un instrument statistic sau un specialist trebuie să folosească ipotezele potrivite testului. Nu există un număr universal de abonați care garantează o concluzie solidă.
Ce faci dacă lista este prea mică
O listă mică nu face inutilă îmbunătățirea emailurilor, dar limitează precizia comparațiilor. Dacă ai foarte puține clicuri, o singură persoană poate schimba ordinea variantelor. În loc să anunți un câștigător definitiv, consemnează rezultatul ca neconcludent și folosește observațiile pentru următoarea ipoteză.
Poți obține informații utile și prin revizia mesajului cu câțiva cititori potriviți. Întreabă ce cred că vor găsi în email după ce văd subiectul și ce parte este neclară. Acest exercițiu verifică înțelegerea promisiunii; nu înlocuiește un experiment și nu trebuie prezentat drept dovadă că varianta va crește conversiile.
Dacă repeți ideea în mai multe newslettere, păstrează contextul în jurnal. Nu aduna mecanic rezultate dintr-un ghid gratuit, o promoție de sezon și o invitație la eveniment. Oamenii au motive diferite să reacționeze. Caută mai întâi un tipar în campanii comparabile și menține concluzia la nivelul publicului și tipului de mesaj testat.
Pentru abonații aflați chiar la începutul relației cu firma, poate fi mai importantă clarificarea promisiunii și a succesiunii mesajelor. Vezi ghidul despre construirea unei serii de emailuri de bun venit înainte să optimizezi un singur subiect într-un flux încă neclar.
Verificarea operațională înainte de lansare
Trimite probe către adrese de test și verifică subiectul, diacriticele, numele expeditorului, textul de previzualizare și linkul principal. Privește mesajul pe un ecran mic. O formulare care își ascunde informația esențială la final poate deveni greu de înțeles când spațiul de afișare este limitat.
Confirmă că ambele variante au același conținut și aceeași ofertă. Verifică destinatarii eligibili, excluderile și lipsa suprapunerii între grupuri. Dacă se mai trimit campanii în aceeași perioadă, notează acest lucru și evită să favorizezi accidental un grup printr-o comunicare suplimentară.
Stabilește cine poate opri trimiterea în cazul unei erori evidente, precum un link defect sau o ofertă expirată. Oprirea pentru remedierea unei probleme este diferită de oprirea pentru a păstra un rezultat favorabil. Dacă eroarea a afectat doar o variantă, consemnează testul ca compromis și nu folosi datele pentru a judeca formularea subiectului.
Păstrează o copie a variantelor și a setărilor. Dacă un coleg schimbă ulterior titlul campaniei din platformă, trebuie să poți reconstitui ce au primit efectiv destinatarii. Fără această evidență, discuția despre rezultat ajunge ușor să compare texte pe care nimeni nu le-a văzut în forma presupusă.
Scrie o concluzie care poate fi folosită de echipă
O notă bună de test are cinci componente: întrebarea, variantele, publicul, rezultatele și decizia. Pentru exemplul nostru, concluzia poate fi: „În newsletterul despre cabluri, formularea problemei a avut opt destinatari cu clic în plus. Datele nu susțin încă o regulă generală. Păstrăm ambele abordări și repetăm ipoteza într-un context comparabil”.
Adaugă limitele care pot schimba interpretarea: volumul mic, livrări inegale, activitate automată, o pagină indisponibilă temporar sau altă campanie trimisă simultan. Nu sunt observații decorative la finalul raportului. Ele stabilesc câtă încredere poți avea în decizia luată și ce trebuie reparat înaintea următorului test.
Dacă rezultatul este clar și suficient susținut, documentează regula într-o formă îngustă: pentru acest public, acest tip de ghid și această promisiune, abordarea aleasă merită reutilizată. Nu transforma concluzia în „întrebările sunt întotdeauna mai bune” sau „subiectele scurte câștigă”. Astfel de generalizări depășesc experimentul.
Când analiza include vânzări sau cereri, păstrează distincția dintre evenimentele raportate și rezultatul confirmat în firmă. Articolul despre diferența dintre conversiile raportate și vânzări explică de ce numerele din platforme trebuie legate de definiții operaționale clare.
Un exemplu de fișă completată înaintea testului
Pentru newsletterul fictiv despre cabluri, fișa poate preciza: publicul este segmentul interesat de amenajarea biroului, variabila este subiectul, iar indicatorul principal este proporția destinatarilor unici care accesează ghidul din mesajele livrate. Introdu separat textele exacte pentru A și B, apoi notează că expeditorul, previzualizarea și corpul rămân identice.
În câmpul pentru calendar, trece data trimiterii și momentul stabilit pentru citirea rezultatului. În câmpul pentru calitatea datelor, notează filtrarea activității automate și verificarea linkurilor. În câmpul pentru decizie, scrie ce vei face dacă rezultatul este clar, dacă este neconcludent sau dacă apare o eroare de implementare. Aceste trei situații nu trebuie tratate identic.
Fișa poate încăpea într-o pagină și poate fi completată într-o discuție scurtă. Valoarea ei este că previne schimbarea întrebării după apariția rezultatelor. Când echipa revine peste câteva săptămâni la test, va putea distinge între ce a fost planificat, ce s-a întâmplat efectiv și ce merită investigat mai departe.
Greșeli care fac testul greu de interpretat
Prima greșeală este schimbarea simultană a mai multor elemente fără recunoașterea acestui lucru. Dacă B are alt subiect, altă reducere și alt buton, rezultatul privește întregul mesaj. Nu îl folosi pentru a declara că un anumit cuvânt din subiect este responsabil de diferență.
A doua este compararea unor momente diferite ca și cum publicul ar fi avut aceleași condiții. Un email trimis luni dimineața și unul trimis înainte de închiderea unei promoții se află în contexte diferite. Dacă vrei să testezi momentul, formulează un experiment dedicat acestuia, fără să îl confunzi cu testul subiectului.
A treia este alegerea retrospectivă a indicatorului avantajos. O variantă poate conduce la deschideri, cealaltă la clicuri, iar comenzile pot fi aproape egale. Criteriul principal trebuie să fie stabilit înainte. Indicatorii secundari te ajută să înțelegi comportamentul, nu să găsești cu orice preț o victorie de raportat.
Întrebări frecvente
Merită să testez emoji în subiect?
Da, dacă există o ipoteză potrivită publicului și mesajului. Păstrează aceeași promisiune și modifică doar elementul investigat. Verifică afișarea înainte de trimitere și evită simbolurile care fac sensul ambiguu. Rezultatul unui email nu stabilește automat o regulă pentru toate comunicările brandului.
Pot retrimite varianta câștigătoare celor care nu au deschis?
Aceasta este o decizie separată de testul inițial. Datele despre deschidere au limite, iar o nouă trimitere schimbă frecvența comunicării. Nu trata grupul „fără deschidere înregistrată” ca pe o listă sigură de persoane care nu au văzut mesajul. Evaluează mai întâi relevanța și contextul unei retrimiteri.
Ce aleg dacă rezultatul rămâne egal?
Poți păstra varianta mai clară și mai fidelă conținutului, menționând că alegerea este editorială. Un rezultat neconcludent nu obligă echipa să blocheze newsletterul. El înseamnă că experimentul nu a furnizat suficiente dovezi pentru a afirma superioritatea uneia dintre formulări.
Cât de des ar trebui să fac teste?
Testează când ai o întrebare utilă, date suficiente și capacitatea de a aplica rezultatul. Nu este necesar ca fiecare trimitere să conțină un experiment. Un jurnal cu câteva teste bine definite este mai valoros decât o succesiune de comparații fără ipoteză, fără verificarea datelor și fără o decizie ulterioară.