A/B-test significantie calculator

A/B-test significantie calculator

Voer uw testgegevens regel per regel in – een naam, het aantal bezoekers en het aantal conversies – en dit gereedschap voert een twee-proportie z-test uit tegen de eerste regel, die als controle dient. Het rapporteert de conversiesnelheid van elke variant, de absolute en relatieve lift boven de controle, een betrouwbaarheidsinterval en of het verschil statistisch significant is.

Het betrouwbaarheidsniveau bepaalt hoe streng de test is: 90%, 95% of 99%. Een tweezijdige test controleert of een variant in welke richting dan ook van de controle verschilt; een eenzijdige test controleert alleen of deze beter is, wat sneller tot significantie leidt met dezelfde gegevens. Door het betrouwbaarheidsinterval in te schakelen, wordt een bereik voor de werkelijke conversiesnelheid van elke variant toegevoegd, niet alleen voor de controle. Kies een tabel voor een compacte vergelijking naast elkaar, of een zin voor een eenvoudige uitvoer met een duidelijke winnaar.

Echt verkeer is rommelig, dus het gereedschap controleert ook de steekproefgrootte: wanneer het verwachte aantal conversies of niet-conversies voor een variant onder de vijf valt, wordt een opmerking toegevoegd dat de normale benadering achter de test mogelijk onbetrouwbaar is, in plaats van een zelfverzekerd klinkend getal uit te geven dat dat niet is. U kunt meer dan twee varianten tegelijk vergelijken – elke regel na de controle wordt onafhankelijk ertegenover getest, en de winnaar is de variant met de hoogste conversie die de controle met een statistisch significant verschil verslaat.

Alles draait lokaal in uw browser. Bezoekers- en conversieaantallen kunnen commercieel gevoelig zijn, en niets ervan wordt ooit geüpload – de berekening vindt op uw apparaat plaats en nergens anders. Kopieer het resultaat, download het als .txt-bestand, of stuur het terug naar de invoer om een getal aan te passen en de significantie bijgewerkt te zien.

FAQ