Aller au contenu
TextArray1.41.0
Tout en local

Calculateur de signification des tests A/B

Calculez les taux de conversion, le lift et la signification statistique des variantes de test A/B.

Entrée
Sortie
Outils connexes
Statistiques de somme et de nombresNombres
Calculateur de pourcentageNombres
Changement en pourcentageNombres
Validateur de numéro de naissanceNombres
Évaluateur mathématique en ligneNombres
Calculateur de pourcentageNombres
Calculateur de signification des tests A/B
Entrez vos données de test sur une ligne par variante — nom, nombre de visiteurs et nombre de conversions — et cet outil exécute un test z à deux proportions comparant la première ligne (le contrôle) à chaque variante. Il rapporte le taux de conversion, le lift absolu et relatif par rapport au contrôle, un intervalle de confiance et si la différence est statistiquement significative.
Le niveau de confiance détermine la rigueur du test : 90%, 95% ou 99%. Un test bilatéral vérifie si une variante diffère du contrôle dans les deux directions; un test unilatéral demande seulement si elle est meilleure, atteignant la signification plus rapidement avec les mêmes données. L'activation de l'intervalle de confiance ajoute une plage pour le vrai taux de conversion de chaque variante, pas seulement le contrôle. Choisissez un tableau pour une comparaison compacte côte à côte, ou une phrase pour un résumé en langage naturel se terminant par un vainqueur déclaré.
Le trafic réel est imprévisible, donc l'outil vérifie aussi la taille de l'échantillon : quand le nombre attendu de conversions ou de non-conversions pour une variante descend au-dessous de cinq, il ajoute une note indiquant que l'approximation normale pourrait être peu fiable, plutôt que de rapporter un nombre confiant qui ne l'est pas. Vous pouvez comparer plus de deux variantes à la fois — chaque ligne après le contrôle est testée indépendamment contre lui, et le vainqueur est la variante avec le plus de conversions qui dépasse le contrôle par une marge statistiquement significative.
Tout s'exécute localement dans votre navigateur. Les chiffres de trafic et de conversion peuvent être commercialement sensibles, et rien n'est jamais téléchargé — le calcul se fait sur votre appareil et nulle part ailleurs. Copiez le résultat, téléchargez-le en tant que fichier .txt, ou renvoyez-le à l'entrée pour ajuster un nombre et voir la signification se mettre à jour.
FAQ
Comment est calculée la signification?
L'outil exécute un test z à deux proportions entre le contrôle (la première ligne) et chaque autre variante, en utilisant une erreur standard regroupée, et compare la valeur p résultante à votre niveau de confiance choisi.
Quelle est la différence entre unilatéral et bilatéral?
Un test bilatéral vérifie s'il y a une différence par rapport au contrôle, dans n'importe quelle direction, meilleure ou pire. Un test unilatéral vérifie seulement si c'est mieux, il faut donc des données moins extrêmes pour déclarer un résultat significatif.
Pourquoi avertit-il sur la taille de l'échantillon?
Le test z suppose une distribution à peu près normale, qui nécessite au moins environ cinq conversions attendues et cinq non-conversions attendues par variante. Au-dessous de cela, l'outil signale le résultat comme potentiellement peu fiable au lieu de cacher le caveat.
Puis-je tester plus de deux variantes?
Oui. Ajoutez autant de lignes que vous le souhaitez après le contrôle: chacune est comparée indépendamment à celui-ci, et le vainqueur est la meilleure variante qui dépasse votre seuil de signification.
Mes données de trafic et de conversion sont-elles téléchargées quelque part?
Non. Le calcul s'exécute entièrement dans votre navigateur, donc vos chiffres de visiteurs et de conversions ne quittent jamais votre appareil.