Problème des comparaisons multiples

Lorsque l'on effectue plusieurs tests statistiques, la probabilité d'obtenir au moins un faux positif par hasard augmente avec le nombre de tests. Le problème des comparaisons multiples (également appelé problème de multiplicité) survient car si vous effectuez 100 tests d'hypothèse avec α = 0,05, vous vous attendez à environ 5 faux positifs par le seul fait du hasard, même si toutes les hypothèses nulles sont vraies. Les méthodes de correction — Bonferroni, taux de fausses découvertes (FDR) de Benjamini-Hochberg, et autres — ajustent le seuil de signification ou les p-valeurs pour contrôler les taux d'erreur. Ce concept est essentiel pour l'intégrité de la recherche et a des implications profondes pour la science exploratoire.