Kalkulator istotności statystycznej testów A/B
Porównuj warianty testów według współczynnika konwersji, wzrostu i istotności statystycznej.
Kalkulator istotności statystycznej testów A/B
Wklejte dane testu jako jeden wiersz na wariant – nazwę, liczbę odwiedzających i liczbę konwersji – a to narzędzie uruchomi test z proporcji dla dwóch grup wśród pierwszego wiersza, który traktuje jako kontrolę. Raportuje współczynnik konwersji każdego wariantu, bezwzględny i względny wzrost w stosunku do kontroli, przedział ufności i czy różnica jest istotna statystycznie.
Poziom ufności określa rygoryzm testu: 90%, 95% lub 99%. Test dwustronny sprawdza, czy wariant różni się od kontroli w obu kierunkach; test jednostronny sprawdza tylko, czy jest lepszy, co osiąga istotność szybciej z tymi samymi danymi. Włączenie przedziału ufności dodaje zakres dla rzeczywistego współczynnika konwersji każdego wariantu, a nie tylko kontroli. Wybierz tabelę do kompaktowego porównania obok siebie lub zdanie dla czystego, zrozumiałego wyniku kończącego się wskazaniem zwycięzcy.
Rzeczywisty ruch jest chaotyczny, więc narzędzie sprawdza również wielkość próbki: gdy oczekiwana liczba konwersji lub brak konwersji dla dowolnego wariantu spadnie poniżej pięciu, dodaje uwagę, że normalne przybliżenie zawarte w teście może być zawodne, zamiast podawać liczbę, która brzmi pewnie, ale nią nie jest. Możesz porównać więcej niż dwa warianty naraz – każdy wiersz po kontroli jest testowany niezależnie względem niej, a zwycięzcą jest wariant o najwyższej konwersji, który kontrolę pokonuje statystycznie istotnie.
Wszystko odbywa się lokalnie w przeglądarce. Liczby odwiedzających i konwersji mogą być wrażliwe komercyjnie i nigdy nie są przesyłane – obliczenia odbywają się na urządzeniu i nigdzie indziej. Skopiuj wynik, pobierz go jako plik .txt lub wyślij go z powrotem do wejścia, aby dostosować liczbę i zobaczyć aktualizację istotności.