Ugrás a tartalomhoz
100% helyi

A/B-teszt szignifikancia kalkulátor

Konverziós ráta, lift és statisztikai szignifikancia kiszámítása az A/B-teszt variánsok között.

Bemenet
Kimenet

A/B-teszt szignifikancia kalkulátor

Adja meg a teszt adatait soronként — egy nevet, a látogatók számát és az átalakítások számát — és ez az eszköz egy kétarányú z-tesztet futtat az első sor ellen, amelyet kontrollként kezel. Minden variáns konverziós rátáját, az abszolút és relatív lift-et a kontrollhoz képest, egy konfidencia intervallumot és azt jelenti, hogy a különbség statisztikailag szignifikáns-e.

A konfidencia szint határozza meg, milyen szigorú a teszt: 90%, 95% vagy 99%. A kétoldali teszt azt kérdezi, hogy egy variáns különbözik-e a kontrolltól bármelyik irányban; az egyoldali teszt csak azt kérdezi, hogy jobb-e, amely ugyanez az adatokhoz képest gyorsabban eléri az szignifikanciát. A konfidencia intervallum bekapcsolásával minden variáns igaz konverziós rátájára egy tartomány adható meg, nem csak a kontrollra. Válasszon táblázatot a tömör egymás melletti összehasonlításhoz, vagy mondatot a sima szövegű olvasathoz, amely egy megemlített nyertese zárul.

A valódi forgalom kaotikus, ezért az eszköz a minta méretét is ellenőrzi: amikor az átalakítások vagy nem-átalakítások várható száma bármely variánsra öt alatt marad, egy megjegyzést ad, hogy a teszt alapjául szolgáló normál közelítés megbízhatatlan lehet, ahelyett hogy egy magabiztosan hangzó számot adna, amely nem az. Egyszerre több mint két variánst is összehasonlíthat — az első után minden sor egymástól függetlenül tesztelve van a kontrollon, a győztes pedig a legmagasabb konvertáló variáns, amely statisztikailag szignifikáns mértékben legyőzi a kontrollt.

Minden számítás helyileg történik a böngészőjében. A forgalom és az átalakítási számok bizalmasan kezelhetők, ezért semmi nem töltődik fel — a számítás az Ön eszközén történik, és sehol máshol. Másolja ki az eredményt, töltse le .txt fájlként, vagy küldje vissza a bemenethez, hogy módosítson egy számot, és lássa, amint a szignifikancia frissül.

Gyakori kérdések

Hogyan számítódik a szignifikancia?
Az eszköz a kontroll (az első sor) és az egyes variánsok között egy kétarányú z-tesztet futtat, egy összevetített standard hibát használva, és az eredményül kapott p-értéket a kiválasztott konfidencia szinthez hasonlítja.
Mi a különbség az egyoldali és kétoldali között?
A kétoldali teszt ellenőrzi, hogy egy variáns különbözik-e a kontrolltól, jobban vagy rosszabbul. Az egyoldali teszt csak azt ellenőrzi, hogy a variáns jobb-e, ezért kevésbé szélsőséges adatokra van szükséges az eredmény szignifikánsnak minősítéséhez.
Miért figyelmeztet a minta méretére?
A z-teszt nagyjából normális eloszlást feltételez, amely variánsonként legalább öt várt átalakítást és öt várt nem-átalakítást igényel. Ennél alacsonyabb értéknél az eszköz az eredményt potenciálisan megbízhatatlanként jelöli meg, ahelyett hogy a figyelmeztetést elrejtené.
Tesztelhetek több mint két variánst?
Igen. Annyi sort adhat hozzá a kontroll után, ahányat csak szeretne — mindegyik egymástól függetlenül tesztelve van a kontrollon, a győztes pedig az a variáns, amely teljesíti a szignifikancia küszöbértéket.
Feltöltik az adataimat valahova?
Nem. A számítás teljes egészében a böngészőjében fut, így a látogató száma és az átalakítási számok soha nem hagyják el az eszközét.