A/B-test signifikanskalkylator
Beräkna konverteringsfrekvens, lyft och statistisk signifikans för A/B-test varianter.
A/B-test signifikanskalkylator
Mata in dina testdata rad för rad – ett namn, antalet besökare och antalet konverteringar – och det här verktyget kör ett två-proportioner z-test mot första raden, som det behandlar som kontrollen. Det rapporterar varje variants konverteringsfrekvens, den absoluta och relativa lyftningen över kontrollen, ett konfidensintervall och huruvida skillnaden är statistiskt signifikant.
Konfidensnivån avgör hur streng testet är: 90%, 95% eller 99%. Ett tvåsidigt test kontrollerar om en variant skiljer sig från kontrollen i någon riktning; ett ensidigt test kontrollerar bara om det är bättre, vilket når signifikans snabbare för samma data. Om du aktiverar konfidensintervallet läggs ett intervall för varje variants sanna konverteringsfrekvens till, inte bara för kontrollen. Välj en tabell för en kompakt sida vid sida-jämförelse, eller en mening för en enkel utdata som slutar med en angiven vinnare.
Verklig trafik är rörigt, så verktyget kontrollerar också provstorleken: när det förväntade antalet konverteringar eller icke-konverteringar för någon variant faller under fem, lägger det till en anmärkning att den normala approximationen bakom testet kan vara opålitlig, snarare än att rapportera ett självsäkert tal som inte är det. Du kan jämföra mer än två varianter på en gång – varje rad efter kontrollen testas oberoende mot den, och vinnaren är den högst konverterande varianten som slår kontrollen med en statistiskt signifikant marginal.
Allt körs lokalt i din webbläsare. Besökare- och konverteringsantal kan vara kommersiellt känsliga, och ingenting av det laddas någonsin upp – beräkningen sker på din enhet och ingenstans annars. Kopiera resultatet, hämta det som en .txt-fil, eller skicka det tillbaka till inmatningen för att justera ett tal och se signifikansuppdateringen.