Ok, laatste poging dan
Want of jullie zijn aan het trollen en als dat zo is, chapeau...
Of jullie hebben nul moeite gedaan om het topic van Inno omtrent deze tests te lezen EN/OF überhaupt opgezocht wat een A/B test is.
Of jullie snappen het echt niet, wat ook gewoon kan natuurlijk vandaar deze laatste poging want dat zou gewoon jammer zijn.
Zal het zo kort mogelijk houden zover, dat gaat
Mijn voorbeeld: Dagelijkse inlogbonus
We geven groep A een nieuwe optie (dagelijkse inlogbonus) en groep B niet.
Wat zien we dan vervolgens gebeuren? Gaat groep A nu ineens door deze nieuwe optie meer inloggen? Dus zien we gedragsverandering?
En tijdens deze test, blijft groep B zonder deze optie zich zo gedragen als voorheen of wijkt deze data ineens af (B is dus onze controle) want als dit ineens gaat afwijken bij groep B terwijl we daar niets veranderd hebben moet dit mee worden genomen worden en gewogen worden in de beoordeling m.b.t. hoe effectief de nieuwe dagelijks inlogbonus is wanneer we naar groep A kijken.
Je hebt dus gewoon mensen zonder en met nodig de nieuwe dagelijkse inlogbonus nodig om data te vergaren en in te schatten of iets werkt.
Zien ze dat de nieuwe optie werkt, dan gaan we waarschijnlijk allemaal die dagelijkse inlogbonus krijgen, zien we geen verschil dan zal het waarschijnlijk er niet door komen want waarom mensen gratis extra's geven als dit het doel niet bereikt.
En dit hoeft echt niet verdeeld te worden in de ene helft van de spelers en dan in de andere helft je kunt ook op basis van verschillende criteria subgroepen maken, voorbeeld hieronder.
Het zou mij namelijk logisch zijn als ze voor die event pass meerdere groepen maken, dit is gebaseerd op mijn ideeën natuurlijk niet op wat Inno daadwerkelijk doet nu want heb er geen idee hoe ze bepalen wie wel en wie niet en of ze gewoon 50/50 doen qua spelers of dat ze zoals mijzelf logisch lijkt meerdere groepen spelers kijken op basis van bijvoorbeeld deze of andere criteria.
Mijn idee m.b.t. event pass:
Je hebt een hoop categorieën spelers in FoE, als ik denk aan diamanten kopen denk ik zelf aan de volgende categorieën:
* Mensen die elk event diamanten kopen.
* Mensen die eens in de zoveel events diamanten kopen.
* Mensen die alleen diamanten kopen met 200% of hogere bonus aanbiedingen.
* Mensen die nooit diamanten kopen.
Je geeft binnen deze groepen een deel beide opties van de event pass (groep A), en een ander deel slechts een optie.
Hoeveel % koopt een event pass van groep A en B en ligt dit hoger of lager bij A of B of maakt het niets uit?
En hoeveel van de mensen in groep A kopen het duurste niveau en hoeveel het laagste?
Is er dan veel verschil tussen mensen die altijd met events diamanten kopen en mensen die het soms doen? Zo ja dan moeten we nog een extra bonus invoeren om die laatste groep dan bijvoorbeeld over de streep te trekken bij het volgende event.
Zien we verschil bij mensen die normaal alleen diamanten kopen met de 200% aanbieding of niet? Afhankelijk van resultaat kan hier dus ook weer kijken of je iets extra's moet doen volgend event of niet.
Laatste toevoeging:
Je kan dit natuurlijk met allerlei verschillende functies doen, en hoop dat mijn uitleg duidelijk genoeg is om aan te geven dat groepen zonder de functie of zonder de hoogste niveau van de event pass zeker waardevol zijn vanuit het perspectief van het bedrijf.
Dit testen op alleen de beta server is gewoon niet voldoende, sowieso al niet omdat er daar maar een server is met dus spelers van weet ik hoeveel verschillende landen en dat vervuild ook weer in bepaalde mate de data plus dat mensen daar gratis diamanten krijgen omdat ze testen en dat heeft ook weer invloed op wat mensen doen dus dat vertekend ook weer.
Kan me ook wel voorstellen dat uitgave patronen per land ook nog anders zullen zijn dus daar zullen ze ook naar kijken denk ik.
Kortom, je moet dit dus wel op de live servers doen, om inzicht te krijgen in het wat en waarom mensen doen.
Uiteindelijk gaat dit natuurlijk om mensen zoveel mogelijk te laten spelen en zoveel mogelijk geld uit te laten geven.
Betekend dit dat mensen in sommige gevallen benadeeld worden in bepaalde mate tijdens het testen, helaas wel.
Zijn het daarom geen geldige A/B testen? Nee.
De groeten