Dragi fani Forge,
În ultima vreme, am primit comentarii cu privire la testele A/B și la modul în care le realizăm, în special cu privire la cele pentru Forge Plus și actualizarea Provocărilor zilnice. Prin urmare, ne-am gândit că ar fi util să aveți mai multe informații despre abordarea noastră privind testele A/B și de ce acestea fac parte integrantă din dezvoltarea Forge of Empires.
Să începem cu o definiție. Un test A/B este un test standard în domeniu, folosit adesea de dezvoltatori pentru a monitoriza reacția jucătorilor la o anumită funcție. Cu astfel de teste, două sau mai multe grupuri sunt selectate aleatoriu. Acestea constau dintr-un grup de testare (grupul "A"), care va avea acces la o caracteristică, și un grup de control (grupul "B"), care nu are acces. Prin intermediul acestei comparații, dezvoltatorii pot monitoriza în mod direct modificarea comportamentului jucătorilor și pot evalua impactul funcției testate. Facem acest lucru prin intermediul feedback-ului cantitativ și calitativ. Și trebuie să le luăm în considerare pe amândouă, dar vă rugăm să încercați să țineți cont de faptul că feedback-ul de pe forum este doar o parte din numeroasele aspecte prin care primim feedback.
Să luăm ca exemplu recenta actualizare a Provocărilor zilnice. Având în vedere cele două grupuri, putem compara multe aspecte (inclusiv participarea zilnică, fidelizarea utilizatorilor la această funcție, epocile celor care participă etc.). Acest lucru ne ajută să stabilim dacă schimbarea a fost benefică și atractivă pentru jucătorii noștri ca o nouă ofertă. Dacă rezultatele nu arată o tendință pozitivă, putem cerceta mai amănunțit și verifica dacă a existat o problemă. În final, putem interveni și putem fie să ajustăm funcția, fie să o eliminăm complet.
Acesta este motivul pentru care testele A/B sunt esențiale pentru noi. Ele ne permit să accesăm date mai utile pe baza unui mediu de testare live. Cu aceste date, putem să ne perfecționăm funcțiile și să identificăm eventualele probleme.
Mai mult decât atât, lansarea unei noi funcții pentru un grup mai mic de jucători ne permite să monitorizăm mai eficient feedback-ul și să prevenim potențiala explozie de frustrare care ar putea avea loc dacă am lansa imediat funcții pentru toți utilizatorii jocului.
Forge of Empires este, bineînțeles, un joc mare. Este susținut de sute de mii de jucători pe mai multe lumi. Dar asta înseamnă și că multe lucruri pot merge prost. Testele A/B sunt o necesitate absolută dacă se dorește atenuarea riscului potențial al dezvăluirii unei noi funcții unui public atât de numeros. Consecințele lansării unei funcții netestate pot cauza interacțiuni negative cu jocul, atât pentru noi, cât și pentru voi.
De asemenea, este important să subliniem că testele A/B nu sunt selective. Niciun jucător nu va păstra vreun tip de avantaj pe termen lung sau nu va fi preselectat pentru grupul de testare. Probabil ați observat că există unele funcții pe care nu le putem testa, deoarece avantajele ar fi prea mari pentru a fi corecte, iar noi dorim să menținem corectitudinea în joc. Selecția pentru teste este pur aleatorie, iar corectitudinea nu este singurul motiv pentru acest lucru: este și pentru că un element aleatoriu este parte integrantă a calității rezultatelor testelor.
Sperăm că acest anunț clarifică motivul pentru care testele A/B sunt esențiale pentru strategia noastră de dezvoltare și vor rămâne o parte integrantă a actualizărilor viitoare.
Echipa Forge of Empires