Vai al contenuto
100% locale

Calcolatore di significatività per test A/B

Calcola tassi di conversione, lift e significatività statistica delle varianti nei test A/B.

Ingresso
Uscita

Calcolatore di significatività per test A/B

Inserisci i dati del tuo test in una riga per variante: nome, numero di visitatori e numero di conversioni. Lo strumento esegue un test z a due proporzioni confrontando la prima riga (controllo) con ogni variante. Calcola il tasso di conversione, il lift assoluto e relativo rispetto al controllo, un intervallo di confidenza e se la differenza è statisticamente significativa.

Il livello di confidenza determina la severità del test: 90%, 95% o 99%. Un test bilaterale verifica se una variante differisce dal controllo in entrambe le direzioni; un test unilaterale chiede solo se è migliore, raggiungendo significatività più rapidamente con gli stessi dati. L'attivazione dell'intervallo di confidenza aggiunge un intervallo per il vero tasso di conversione di ogni variante, non solo il controllo. Scegli una tabella per un confronto compatto affiancato, o una frase per un riepilogo in linguaggio naturale terminando con un vincitore dichiarato.

Il traffico reale è imprevedibile, quindi lo strumento verifica anche la dimensione del campione: quando il numero atteso di conversioni o non-conversioni scende al di sotto di cinque, aggiunge una nota che l'approssimazione normale potrebbe essere inaffidabile, piuttosto che riportare un numero che suona sicuro ma non lo è. Puoi confrontare più di due varianti contemporaneamente: ogni riga dopo il controllo viene testata indipendentemente contro di esso, e il vincitore è la variante con il maggior tasso di conversione che supera il controllo con un margine statisticamente significativo.

Tutto viene eseguito localmente nel tuo browser. I numeri di traffico e conversione possono essere commercialmente sensibili e non vengono mai caricati: il calcolo avviene sul tuo dispositivo e da nessun'altra parte. Copia il risultato, scaricalo come file .txt, oppure rimandalo all'input per regolare un numero e vedere la significatività aggiornata.

FAQ

Come viene calcolata la significatività?
Lo strumento esegue un test z a due proporzioni tra il controllo (la prima riga) e ogni altra variante, utilizzando un errore standard raggruppato, e confronta il p-value risultante con il tuo livello di confidenza scelto.
Qual è la differenza tra unilaterale e bilaterale?
Un test bilaterale verifica se c'è una differenza dal controllo in qualsiasi direzione, migliore o peggiore. Un test unilaterale verifica solo se è migliore, quindi ha bisogno di dati meno estremi per dichiarare un risultato significativo.
Perché avverte sulla dimensione del campione?
Il test z presuppone una distribuzione approssimativamente normale, che richiede almeno circa cinque conversioni previste e cinque non-conversioni previste per variante. Al di sotto, lo strumento contrassegna il risultato come potenzialmente inaffidabile invece di nascondere il caveat.
Posso testare più di due varianti?
Sì. Aggiungi tutte le righe che desideri dopo il controllo: ognuna viene confrontata indipendentemente con esso, e il vincitore è la migliore variante che supera la tua soglia di significatività.
I miei dati di traffico e conversione vengono caricati da qualche parte?
No. Il calcolo viene eseguito interamente nel tuo browser, quindi i tuoi numeri di visitatori e conversioni non lasciano mai il tuo dispositivo.