A/B Testing vs. UX Research

Pe internet pot fi găsite multe dezbateri în legătură cu alegerea uneia dintre cele două discipline de research pentru optimizarea proprietăților online. În acest articol vreau să clarific care este „locul” fiecăreia dintre acestea.

Prin A/B Testing se descoperă variata unei pagini care produce cele mai mari venituri. Este o idee care atrage din ce în ce mai multe persoane care lucrează în online, pe măsură ce tool-urile de testare se simplifică.

UX Research reunește mai multe tehnici diferite de cercetare, în scopul de a îmbunătăți experiența online a utilizatorilor. Și pentru că există confuzii, usability testing se referă doar la una dintre tehnicile de user experience research, deci cele două nu sunt sinonime. Mai multe despre usability testing într-un articol viitor, pentru că nu vreau să complic lucrurile.  Continue reading →

Tags: , , , , ,

Analiza rezultatelor testelor

Există un lucru mai rău decât să nu testezi și acesta este să interpretezi greșit rezultatele testelor. Odată ce începi să testezi colegii vor veni cu întrebări de genul să folosim poze cu oameni sau cu produse? Tentația celor mai mulți este să se poziționeze ca experți în organizație și să aibă un răspuns ad-hoc la fiecare întrebare. Din păcate, multre dintre aceste răspunsuri sunt greșite. Să vedem cum putem evita aceste greșeli! Continue reading →

Tags: , , ,

Lead Converter

Dacă ai vizitat acest site în ultimul timp, ai observat un widget prin intermediul căruia te întrebam despre ce ai vrea să citești în următoarele articole pe care le public. Am folosit pentru asta Lead Converter, o soluție de widget-uri gândite în primul rând pentru optimizarea conversiilor, dar care pot fi folosite și în alte scopuri, așa cum am făcut eu (pot fi folosite inclusiv drept soluție de live chat / live support cu vizitatorii). Continue reading →

Tags: , , , , ,

Bune practici pentru testare și CRO

Toate site-urile pot fi îmbunătățite, acesta este principalul argument pentru a testa și îmbunătăți. Crezi că site-ul tău face excepție? Poate doar dacă are rată de conversie de 100%, și pariez că nu are. Optimizarea ratei de conversie (prescurtat CRO, de la Conversion Rate Optimization) înseamnă ca la același trafic și aceleași cheltuieli să obții mai multe vânzări, venituri, lead-uri… de la website. Cel mai frumos design web, practicile recomandate pe econsultancy.com sau părerile șefului cel mare nu vor maximiza rata de conversie, ci doar testarea continuă. Iată de ce A/B/n testing-ul (unde n este numărul de variante participante la test) începe să devină popular în anumite cercuri din internetul local. Teoria e bună, dar sunt testele făcute întotdeauna corect?

Optimizarea ratei de conversie se face prin testare controlată, iar în continuare vom trece prin cele mai importante condiții pentru a avea un test relevant. Continue reading →

Tags: , , , ,

A/B Testing în Googe Analytics prin Content Experiments

În urma cu șase ani Google lansa un tool gratuit de analytics, făcând statisticile web accesibile pentru fiecare posesor de site. Gratuitatea și ușurința în utilizare au făcut ca Google Analytics să se impună și să devină un standard.

Pe partea de testing, Website Optimizer de la Google nu a avut același drum. Deși gratuit și integrat cu celelalte instrumente de la Google, GWO a primit actualizări rare și a rămas în urmă față de tool-uri web 2.0 care veneau cu o interfață mult mai prietenoasă.

Pe același lucru mizează Google acum integrând testing-ul sub Google Analytics și făcându-l mai ușor de utilizat de către utilizatorii obișnuiți. Testele se vor seta din interfața GA, unde și-au gasit locul sub secțiunea Content.

Alte avantaje pe care le are Content Experiments față de Website Optimizer:

  • Un singur script nou va trebui introdus în codul site-ului, cel responsabil de trimiterea vizitatorior spre diverse variante ale paginii testate
  • Integrarea cu funcții mai vechi din GA, precum Advanced Segments
  • Google se laudă cu un model statistic îmbunătățit care va putea anunța mai repede varianta câștigătoare
  • Pe de altă parte, rezultatele la teste nu vor apărea mai repede de 2 săptămâni. Google trece asta la avantaje, spunând că astfel va încuraja utilizatorii să ruleze teste relevante statistic
  • Testele nu vor rula mai mult de 3 luni, ca să evite rularea lor la infinit
  • Alocarea dinamică a traficului de la variante cu rezultate mai slabe la variante cu rezultate mai bune

Acestea sunt avantajele prezentate de PR-ul Google. Să vedem și dezavantajele:

  • Testele multivariate vor dispărea. Cu alte cuvinte, nu poți testa N pagini cu Z elemente diferite pe fiecare (și să vezi rezultatele pt N x Z cazuri)
  • Numărul maxim de variații pe test este limitat la 5. Ar trebui să fie suficient pentru majoritatea testelor, totuși
  • Nu este integrat cu ecommerce transactions din GA
  • Numărul de teste care pot fi făcute în același timp pe un profil este de 12. Din nou, în cele mai mute cazuri nu e nevoie de atâtea
  • Fiecare test nou are un alt script care trebuie introdus în site

Probabil că în timp unele dintre dezavantaje vor dispărea, în timp ce limitările impuse de altele vor fi mult mai lejere în varianta Google Analytics Premium (cea care costă 150.000$ pe an…).

Noua abordare a Google este foarte interesantă și mă întreb cu ce alte tool-uri va urma să se mai integreze Google Analytics; poate Feedburner sau mai noul Google Consumer Surveys. În orice caz, Google face un pas înainte.

Tags: , , ,