Calculateur de taille d'échantillon A/B test

Comment la taille d'échantillon est calculée

On compare deux proportions : le taux actuel p₁ et le taux visé p₂ = p₁ × (1 + MDE). Le nombre de visiteurs nécessaires par version est :

n = [ z₁₋α/₂ × √(2 p̄ (1 − p̄)) + z₁₋β × √(p₁(1 − p₁) + p₂(1 − p₂)) ]² ÷ (p₂ − p₁)²

où p̄ = (p₁ + p₂) ÷ 2, z₁₋α/₂ est le quantile de la loi normale lié au seuil de confiance (1,96 pour 95 %, test bilatéral) et z₁₋β celui lié à la puissance (0,84 pour 80 %).

Avec plus de deux versions, on applique une correction de Bonferroni (le risque α est divisé par le nombre de comparaisons avec l'originale), ce qui augmente la taille d'échantillon. La durée est le total de visiteurs divisé par le trafic quotidien de la page, arrondie à la semaine complète supérieure et jamais inférieure à 14 jours.