Kalkulačka štatistickej významnosti A/B testov
Porovnajte varianty testu podľa miery konverzie, zdvihu a štatistickej významnosti.
Kalkulačka štatistickej významnosti A/B testov
Vložte údaje testu ako jeden riadok na variant – názov, počet návštevníkov a počet konverzií – a tento nástroj spustí dvojproporcionálny z-test voči prvému riadku, ktorý považuje za kontrolu. Hlási mieru konverzie každého variantu, absolútny a relatívny zdvih voči kontrole, interval spoľahlivosti a či je rozdiel štatisticky významný.
Úroveň spoľahlivosti určuje striktnosť testu: 90%, 95% alebo 99%. Dvojstranný test zisťuje, či sa variant líši od kontroly v oboch smeroch; jednostranný test zisťuje iba, či je lepší, čo dosahuje významnosti rýchlejšie s rovnakými údajmi. Zapnutie intervalu spoľahlivosti pridáva rozsah pre skutočnú mieru konverzie každého variantu, nielen kontroly. Vyberte tabuľku na kompaktné porovnanie vedľa seba alebo vetu na zrozumiteľný zápis končiaci sa identifikáciou víťaza.
Skutočný dopyt je zložitý, takže nástroj tiež kontroluje veľkosť vzorky: keď očakávaný počet konverzií alebo nekonverzií pre akýkoľvek variant klesne pod päť, pridá poznámku, že normálna aproximácia za testom môže byť nespoľahlivá, namiesto toho, aby hlásil číslo, ktoré znie s istotou, ale nie je. Naraz môžete porovnať viac ako dva varianty – každý riadok za kontrolou sa testuje nezávisle voči nej, a víťazom je variant s najvyššou konverziou, ktorý kontrolu prekoná štatisticky významne.
Všetko prebieha lokálne vo vašom prehliadači. Počty návštevníkov a konverzií môžu byť komerčne citlivé a nikdy sa nepodávajú – výpočet prebieha na vašom zariadení a nikde inde. Skopírujte výsledok, stiahnite si ho ako súbor .txt alebo ho pošlite späť na vstup, aby ste upravili číslo a videli aktualizáciu významnosti.