Testele MVT sau A/B split test - o cale de a creste conversia magazinelor online

15 Septembrie 2009 - 13:02, fii primul care comenteaza, 1,958 vizite
1 stea2 stele3 stele4 stele5 stele (Fii primul care voteaza)
Loading ... Loading ...
translate to english english version of this article

Va fi un articol "scurt", doar sa readuc in memoria cititorilor ce am scris cu un an in urma (De ce ar trebui si magazinele online sa faca teste de tipul split A/B in cautarea solutiei ideale la o problema de uzabilitate? + conversie). Nu as fi scris acest articol daca azi nu aparea postul scris de Krumel Emag: care pagina castiga testul? unde exista mai multe comentarii (si pe Twitter mi s-a raspuns la fel) cum ca in Romania nu se fac astfel de teste.

Chiar daca nu am fost la prezentarea Orange stiu ce s-a vorbit acolo, si stiu ca Orange a facut teste de optimizare a conversiei folosind Optimost. Apoi mai sunt clientii mei la care pana acum am facut cel putin un test la fiecare unde am testat diverse chestiuni, culori, marimi de fonturi, amplasare butoane. Acum nu stiu daca eMAG a facut vreodata, insa m-as mira sa nu faca. Chestia cu "la noi nu se fac astfel de teste" nu tine. Ce se poate spune este ca astfel de teste nu se anunta, nu se discuta, ele se deruleaza periodic si se iau decizii de optimizare a conversiei. In vremuri de criza este unul din principalele instrumente prin care poti sa faci o cifra de afaceri mai mare. Mai sunt magazine online care testeaza altfel, nu cu un instrument dedicat cum ar fi Optimost sau Google Website Optimizer (GWO). Unii fac teste de tipul "A/B split test" fara sa le numeasca in acest fel, si se practica chiar si in publicitatea online, se fac mai multe variante se alege apoi cel cu conversia cea mai buna, se deseneaza doua versiuni se servesc doua html-uri si se noteaza care are conversia cea mai buna, daca aplicatia stie sa faca asta.. sau se fac pe rand, in intervale de timp diferite. Intreg procesul de design (proiectare) a unui magazin online este un test permanent in care echipa de acolo incearca sa optimizeze conversia.

Este foarte adevarat ca noi nu stim cate teste si ce fel de teste fac magazinele online, sau nu toti dintre noi avem plugin-uri care urmaresc acest lucru pe site-urile magazinelor online (eu unul ma uit constant si stiu ce fel de coduri sunt prezente pe magazinele online). Insa ele se deruleaza in mod permanent. Sigur nu am vazut studii de caz despre folosirea Google Website Optimizer, dar cei care au participat la WebSell stiu acum cum sa inceapa sa faca aceste teste. Acolo am prezentat acest tool ca unul dintre cele care te pot ajuta sa cresti conversia.

Diferenta dintre POLL si TESTUL A/B sau MVT (multi variate test)

  • poll-ul este adresat unui multimi mai restranse de oameni si nu este rulat pe pagina magazinului online
  • poll-ul indica o afinitate catre o solutie de asezare in pagina, fara insa a fi pus in situatia reala de a cumpara ceva
  • testul a/b sau mvt dupa caz masoara cresterea conversiei pentru x versiuni ale acelor pagini, in conditii reale

Cand se face un test A/B si cand unul MVT?

Diferenta dintre a testa 2 variante si a testa mai multe variante consta in faptul ca primul test se ruleaza pe o pagina cu putine afisari, si unde se vrea a ase ajunge mai repede la o concluzie, si din a/b in a/b se ajunge la o varianta castigatoare, iar in cazul mvt, este nevoie de o cantitate mare de afisari insa se pot testa combinatiile (lucru imposbil prin a/b): fontul de 14 cu butonul rosu care scrie cumpara si este pus pe mijloc e mai bun decat fontul de 14 cu butonul verde care scrie adauga in cos si e pus pe dreapta.

Chiar si asa, nici testele astea nu pot asigura succesul. Am avut cazuri in care in prima etapa de testare am ales o varianta promitatoare, cu 30-40% crestere a conversiei, iar apoi la etapa doi, de validare a alegerii (follow-up in GWO), unde se ruleaza originalul contra variantei cea mai buna, cresterea a fost mai mult decat modica, de doar 3-4%. Oricum chiar si asa la o cifra de afaceri de milioane de euro lunar inseamna ceva. Insa e o munca grea, care necesita timp mult, si de multe ori se trece peste propunerile acestea la sedinte din cauza timpilor mari de rulare a testelor. Se prefera de multe ori intuitia in dauna matematicii si a masuratorilor.

Am votat pe testul publicat de Krumel pentru prima varianta, pentru ca e mai lizibila, mai clara. Este ok ca s-a adus iar in discutie acest tip de teste. Ar trebui ca mai multe magazine online sa le faca, nu doar cateva. Insa ca orice altceva legat de un business (online sau offline) totul tine de resurse, umane si materiale. Cine are bani si timp face teste, cine nu apeleaza la o parere avizata (bani), sau daca nu roaga prietenii (fara bani, dar necesita timp).

Orice forma de testare este mai buna decat sa nu faci nimic.


Tags: , , , , , , , ,

Articole asemanatoare: Discuta despre magazine online pe yahoo groups: Pentru a fi la curent cu ultimele articole, aboneaza-te la feed-ul RSS
Tipareste acest post Tipareste acest articol

De ce ar trebui si magazinele online sa faca teste de tipul split A/B in cautarea solutiei ideale la o problema de uzabilitate?

1 Septembrie 2008 - 11:20, 2 comentarii, 3,167 vizite
1 stea2 stele3 stele4 stele5 stele (2 voturi, media: 4.5 din 5)
Loading ... Loading ...
translate to english english version of this article

Desi nu era nevoie sa fiu convins, azi am mai primit inca un newsletter (plus un mail de la Interwoven Optimost) care sustine ca testele de tipul split A/B sunt necesare de cele mai multe ori atunci cand cautati o rezolvare la problemele de usability.

Iata ce am primit azi de la Webcredible, newsletter #54: "Split A/B testing involves running two different versions of the site side-by-side and then evaluating the success of each version. When usability problems are found, getting agreement on the most appropriate solution can be difficult. However, rather than evoking a prolonged discussion or argument on the merits of each proposed remedy, split A/B testing should be carried out".

Pe romaneste lucrurile stau cam asa: daca stii ca sunt probleme de uzabilitate pe pagina respectiva si esti magazin online sa zicem, ar fi bine sa faci un test de tipul split A/B pentru a putea masura cresterea/scaderea ratei de conversia si lua o decizie bazata pe masuratori, nu pe un impresii, nu pe ghicite. In masura in care in echipa de evaluare a uzabilitatii paginii nu se ajunge la un consens, sau schimbarea este atat de fina incat efectul ei nu poate fi anticipat, atunci este foarte bine sa rulati un test de tipul split A/B.

Pentru cine nu stie inca ce este acest tip de test, am mai vorbit despre el si pe forumul dedicat comertului electronic, este vorba de a crea si rula simultan 2 versiuni ale aceleasi pagini, si de a masura cresterea/scaderea ratei de conversie datorate celor 2 versiuni ale paginii respective. Mai concret, sa zicem ca nu ati cazut de acord asupra culorii butonului de "adauga in cos" (aici e o alta discutie intreaga asupra denumirii acestui buton - vorbesc despre asta la curs) si atunci creati o pagina de produs in 2 versiuni, una cu butonul de "adauga in cos" rosu, si una cu "adauga in cos" albastru sa zicem…

Instrumente precum Google Website Optimizer (free - gratis) sau Optimost (de la 10.000 de euro in sus) va ajuta sa rulati aceste teste. Vorbind de Google Website Optimizer, acesta e integrat in Google Analytics si astfel veti putea urmari usor cresterea/scaderea ratei de conversie pe cele 2 ramuri. Ce face google pentru voi?? Simplu, ruleaza in mod alternativ cele 2 versiuni ale paginii (in cazul nostru cu cele 2 culori ale butonului de "adauga in cos") si masoara conversia pe cele 2 versiuni, prin conversie intelegand clar numarul de comenzi lansate pornind de la fiecare versiune. Asa ca in loc sa ghiciti care culoare e mai buna pentru designul paginii voastre, veti putea masura exact.

Inchipuiti-va acum ca faceti o serie de teste split A/B, si ca de fapt alegeti dintr-o multitudine de variante ale butonului "adauga in cos", tinand cont de culoare, dimensiune, pozitie… ideea e sa o faceti mereu ruland cate 2 versiuni, sau daca veti cumpara serviciile Optimost, atunci puteti rula simultan cate versiuni vreti.

Despre toate aceste lucruri, sigur in masura in care timpul o permite si voi o cereti, ma veti auzi vorbind la trainingul de comert electronic - iSell, 18-19 septembrie 2008, si poate la urmatorul eveniment de comert electronic din anul acesta, la Gala Premiilor in eCommerce 2008.

O lista scurta cu aplicatii/instrumente care va permit A/B split testing, sau Multivariate Testing

Si o lista cu beneficiile (traduse de pe pagina lui Google Website Optimizer) acestui tip de teste

  • Mariti rata de conversie a magazinului vostru
  • Micsorati rata de bounce/abandon a vizitatorilor pe site
  • Mariti timpul pe care userii il petrec pe site
  • Mariti calitatea serviciilor, sau cel putin perceptia vizitatorilor asupra informatiilor oferite se imbunatateste
  • Eliminati ghicitul din proiectarea paginii web

Te crezi in stare?


Tags: , , , , , , , , , ,

Articole asemanatoare: Discuta despre magazine online pe yahoo groups: Pentru a fi la curent cu ultimele articole, aboneaza-te la feed-ul RSS
Tipareste acest post Tipareste acest articol

Close
E-mail It
Valid XHTML 1.0 Transitional