Проблем с множеството сравнения

При провеждане на множество статистически тестове, вероятността за получаване на поне един фалшив позитив по случайност нараства с броя на тестовете. Проблемът с множеството сравнения (наричан още проблем с множествеността) възниква, защото ако проведете 100 хипотезни теста при α = 0.05, очаквате ~5 фалшиви позитива само по случайност, дори ако всички нулеви хипотези са верни. Корекционните методи – Бонферони, Бенджамини-Хохберг за процент на фалшиви открития (FDR) и други – коригират прага на значимост или p-стойностите, за да контролират нивата на грешки. Тази концепция е от решаващо значение за почтеността на изследванията и има дълбоки последици за изследователската наука.