Testarea A/B este o componentă esențială a strategiei LiveOps a Scopely, permițând deciziile bazate pe date și îmbunătățirea continuă a experienței jucătorului [2] [7]. LiveOps este intensiv în date, astfel încât testarea este importantă pentru a evita greșelile într-un joc [1].
Ce este testarea A/B?
Testarea A/B, cunoscută și sub denumirea de testare divizată, este o metodă de comparare a două versiuni ale unei pagini web sau a unei aplicații pentru a determina care dintre ele efectuează mai bine [2] [6]. În testele A/B, diferiți utilizatori li se oferă la întâmplare versiuni ușor diferite ale unui produs (joc) și se fac măsurători pentru a vedea ce opțiune funcționează mai bine [1] [2]. Opțiunea câștigătoare este apoi lansată către un public mai larg [1]. Testarea A/B ajută la modificări atente la experiențele utilizatorilor în timp ce colectează date despre impactul acestor modificări [2]. Ajută la construirea ipotezelor și să învețe ce elemente și optimizări ale experiențelor afectează cel mai mult comportamentul utilizatorului [2].
Planul de testare A/B:
Înainte de a implementa un test A/B, crearea unui plan este importantă. Pașii din plan includ [1]:
1. Idei de experiment
2. Generarea de opțiuni (ceea ce se va schimba exact pentru diferite grupuri)
3. Alegerea metrică
4. Pregătirea eșantionului
5. Testare preliminară
6. Experiment
7. Interpretarea rezultatelor
Exemple de idei de testare A/B:
* Testarea proiectării diferite modele, cum ar fi un buton față de două butoane și textul de pe fiecare dintre ele [1].
* Apelați la testarea acțiunii diferite apeluri la acțiune [1].
* Prețuri și promoții Testează prețurile și promoțiile [1].
* Testarea publicității diferite reclame [1].
* Notificări push și testarea timpului notificările push și calendarul acestora [1].
Testele de deteriorare:
În loc de teste clasice A/B, „deteriorarea testelor” pot fi mai rentabile pentru evenimentele LiveOps [1]. Într -un test de deteriorare, un grup de utilizatori primește în mod deliberat o opțiune inferioară [1]. De exemplu, dacă doriți să adăugați mai multe niveluri la un joc, dar nu sunteți sigur de rezultate, pentru un grup de jucători noi, puteți reduce numărul de niveluri, iar pentru al doilea grup, lăsați toate nivelurile [1]. Dacă jucătorii care au terminat toate nivelurile arată rezultate mai bune, atunci este nevoie de mai multe niveluri [1].
Generarea opțiunilor:
Testele A/B pot avea mai mult de două opțiuni, deoarece există și teste multivariate [1]. De exemplu, puteți rula un test de preț și un test text simultan (testare multivariată) [1].
Pregătirea eșantionului:
Cel mai important lucru atunci când executați un test A/B este să folosiți un grup de oameni care nu a întâlnit niciodată funcționalitatea schimbată [1]. Prin urmare, testele sunt adesea efectuate pe un tutorial sau pe formularul de descărcare, adică pe acei oameni care instalează mai întâi jocul/aplicația [1]. De asemenea, culesul trebuie să fie aleatoriu; Este fundamental greșit să trimiteți utilizatorii care au venit miercuri într -un grup și utilizatorii care au venit joi în altul [1]. Modul corect este de a le combina pe amândouă într -un segment și de a le distribui la întâmplare în două grupuri [1].
Erori comune în testarea A/B:
* Ipoteza greșită și testarea modificărilor dificil de urmărit [1].
* Interpretare favorabilă a rezultatelor experimentale [1].
* Bazându -se pe intuiție [1].
* Nu ia în considerare publicul (nou/nu nou, surse de trafic, plata/nu plătește) [1].
* Prea puțini utilizatori [1].
* Executarea mai multor teste în același timp [1].
* Lipsa testării anterioare [1].
* Alegerea greșită a valorilor [1].
* Mărimea greșită a eșantionului (prea mică sau prea mare) [1].
Integrarea analizelor de aplicații:
Integrarea analizelor de aplicații în LiveOps vă permite să colectați date valoroase despre comportamentul, preferințele și interesele utilizatorilor [4]. Testarea A/B este o modalitate puternică de a testa două versiuni ale unei caracteristici și de a colecta feedback -ul utilizatorilor [4]. Pentru a integra analitica, aveți nevoie de practici eficiente de colectare a datelor [4]. Alegeți o platformă de analiză care este ușor de utilizat și are capacități robuste pentru segmentarea utilizatorilor, vizualizarea datelor și respectarea confidențialității [4].
Citări:
[1] https://www.devtodev.com/resources/articles/a-b-testing-inviveops
[2] https://www.optimizely.com/optimization-glossary/ab-testing/
[3] https://www.adlibertas.com/guest-post-starting-a-live-ops-strategy/
[4] https://www.appsflyer.com/blog/measurement-analytics/liveops-changing-gaming-landscape/
[5] https://wnhub.io/news/marketing/Item-42838
[6] https://vwo.com/ab-testing/
[7] https://www.tag-games.com/blog/5-tips-for-effective-live-ops
[8] https://www.gamedeveloper.com/business/a-b-tests-for-analysing-liveops-part-1