Aller au contenu
Module
Module 3 sur 5Leçon 1 sur 3~17 min

Hypothèse, métrique principale et garde-fous

Un test dont la métrique est choisie après coup finit presque toujours par confirmer ce que l'équipe voulait entendre. Cette leçon vous apprend à formuler une hypothèse testable, à choisir la métrique qui portera la décision et à fixer les garde-fous avant le lancement. Vous définissez aussi avec les développeurs ce qu'il faut enregistrer pour que l'analyse soit fiable.

Mis à jour le 29 septembre 2026.

En bref

Une hypothèse d'A/B test énonce le changement, l'effet attendu sur une métrique précise et la raison de cet effet, avant le lancement. La métrique principale porte la décision ; les garde-fous vérifient que rien d'important ne se dégrade. Pour un PM, tout fixer à l'avance empêche de choisir après coup le chiffre qui arrange l'équipe.

Objectif de la leçon

À la fin de cette leçon, vous serez capable d'écrire une hypothèse testable et chiffrée, de choisir une métrique principale sensible et attribuable, des garde-fous avec leur seuil, et de spécifier l'événement d'exposition à enregistrer.

Les questions auxquelles cette leçon répond

  • Comment écrire une hypothèse testable pour un A/B test ?

    Une bonne hypothèse relie un changement précis à un effet attendu sur une métrique, avec une ampleur et une justification. Elle doit pouvoir être contredite par le résultat du test.

  • Comment choisir la métrique principale d'un A/B test ?

    Elle doit refléter l'objectif du changement, réagir assez vite pour être mesurée pendant le test et être directement influencée par la variante. Une métrique trop lointaine noie l'effet dans le bruit.

  • Que sont les métriques garde-fous d'un A/B test et comment les fixer ?

    Ce sont des indicateurs qu'on surveille sans chercher à les améliorer, comme les erreurs, le temps de chargement ou les désabonnements. On fixe avant le test le seuil de dégradation qui bloquerait le déploiement.

Thèmes abordés

  • hypothèse d'A/B test
  • métrique principale
  • garde-fous
  • événement d'exposition
  • protocole d'expérience

Dans le glossaire

Tout le glossaire

Guide sur ce thème

  • SQL pour Product Manager

    Les requêtes utiles pour décider seul, les pièges à éviter et l’IA pour écrire du SQL, avec un aide-mémoire.

Dans quel module

Écrire le protocole

Que faut-il fixer avant de lancer le test pour que son résultat soit lisible et crédible ?

Leçons du module

  1. Hypothèse, métrique principale et garde-fous (cette leçon)
  2. Choisir l'unité de randomisation
  3. Calculer la taille d'échantillon et la durée

Ce que vous apprendrez dans ce module

Cette leçon fait partie de la formation Concevoir et analyser un A/B test

  • Formuler une hypothèse testable, choisir une métrique principale sensible et attribuable, des garde-fous et l'événement d'exposition à enregistrer.
  • Choisir l'unité de randomisation et prévenir les interférences entre groupes, y compris en B2B.
  • Calculer une taille d'échantillon et une durée à partir du taux de base, de l'effet minimal détectable, du seuil de significativité et de la puissance.