Skill officielle · Produit
Plan de test A/B
Rédige le plan d'un test A/B : hypothèse, métriques principale et garde-fous, MDE, taille d'échantillon et durée avec le calcul, règles d'arrêt et règle de décision fixée à l'avance.
Skill d'IA
Demandez à votre IA de concevoir un test A/B fiable
14 jours gratuits · Sans carte
Fonctionne dans Claude, ChatGPT et les agents de code. Avec Team et Business, la skill officielle de votre pod se met à jour d'elle-même quand nous l'améliorons.
Quand l'utiliser
- Avant de lancer un test A/B sur une page, un parcours, un e-mail ou un prix
- Quelqu'un demande combien de temps faire tourner un test ou de combien d'utilisateurs il a besoin
Ce que vous lui donnez
- Le changement à tester et sa raison
- La référence de la métrique principale
- Le trafic hebdomadaire dans le test
Ce que vous obtenez
Un plan d'expérimentation d'une page : hypothèse, tableau des métriques, calcul de la taille d'échantillon, durée, règles d'arrêt, règle de mise en production ou non, et risques.
Comment elle fonctionne
- Écrire une hypothèse réfutable
- Choisir une métrique principale et 1 à 3 garde-fous
- Fixer l'effet minimal détectable
- Estimer la taille d'échantillon et la durée, en montrant la méthode
- Écrire les règles d'arrêt
- Écrire la règle de décision avant le lancement
- Lister les risques et la date de lecture des résultats
Exemple
Ce que vous lui donnez
« Nous voulons tester un formulaire d'inscription plus court (3 champs au lieu de 7). Le taux d'inscription est de 4 % des visiteurs de la page tarifs. Environ 6 000 visiteurs par semaine. On le mettrait en production s'il ajoute un point. »
Ce que vous recevez (le début)
Plan d'expérimentation : formulaire d'inscription court
Responsable : [personne] · Décideur : [personne] · Début : [date] · Lecture des résultats : début + 3 semaines
Hypothèse
Comme [à vérifier : élément de preuve, ex. analytics du formulaire montrant un abandon au champ 4], nous pensons qu'un formulaire d'inscription à 3 champs pour les visiteurs de la page tarifs augmentera le taux d'inscription. Nous saurons que c'est vrai si le taux d'inscription progresse d'au moins 1 point de pourcentage (de 4 % à 5 %).
Variantes
- Contrôle : formulaire à 7 champs
- Variante B : formulaire à 3 champs (e-mail, mot de passe, nom de l'entreprise [à confirmer])
- Répartition : 50/50 · Public : nouveaux visiteurs de la page tarifs ; utilisateurs connectés exclus
La suite de ce résultat, toutes les étapes et les vérifications que fait l'IA avant de répondre sont dans votre pod une fois la skill ajoutée.
Utiliser ce skill dans votre IAPartagez-la avec votre équipe
Ajoutez-la au pod de votre équipe sur AI Skill Pod : toute l'équipe, prestataires compris, utilise la même version depuis sa propre IA. Lire les meilleures façons de partager des skills d'IA dans une équipe
Historique des modifications
- v1.0.0 · · First release.
Sources
- How Not To Run an A/B Test - Evan Miller (consultée le 2026-11-04)
- Power Analysis - Statsig Docs (consultée le 2026-11-04)
- Diagnosing Sample Ratio Mismatch in A/B Testing - Microsoft Research (consultée le 2026-11-04)