Предвзятость публикаций

Предвзятость публикаций — это тенденция к тому, что исследования со статистически значимыми или положительными результатами публикуются чаще, более заметно и быстрее, чем исследования с нулевыми или отрицательными результатами. Поскольку систематические обзоры и метаанализы зависят от опубликованных данных, такая избирательная доступность может исказить синтезированную оценку, смещая её в сторону более сильного эффекта, чем есть на самом деле.

Definition

Предвзятость публикаций — это систематическое различие между результатами опубликованных и доступных исследований и результатами всех проведённых исследований, возникающее из-за того, что вероятность и заметность публикации зависят от характера и направленности полученных результатов.

Scope

Эта статья охватывает предвзятость публикаций и более широкое семейство предвзятостей отчётности, которые влияют на синтез доказательств: их причины, их влияние на объединённые оценки, а также графические и статистические методы, используемые для их выявления и изучения, включая воронкообразную диаграмму (funnel plot), регрессионный тест Эггера, ранговый корреляционный тест Бегга и корректировку методом trim-and-fill. Эти вопросы рассматриваются как методологические, а не как клинические рекомендации.

Core questions

• Являются ли доступные для синтеза исследования предвзятой выборкой из всех проведённых исследований?
• Как можно обнаружить наличие такой предвзятости по собранным исследованиям?
• Насколько неопубликованные или избирательно сообщённые результаты могут изменить вывод?

Key concepts

• Предвзятость отчётности и распространения
• Проблема «картотечного ящика»
• Эффекты малых исследований
• Воронкообразная диаграмма и её асимметрия
• Регрессионный тест Эггера
• Ранговый корреляционный тест Бегга
• Корректировка методом trim-and-fill
• Регистрация исследований и протоколов

Mechanisms

Исследования, которые обнаруживают значимые или благоприятные результаты, чаще подаются, принимаются и цитируются, чем те, которые этого не делают, поэтому доступная литература чрезмерно представляет положительные результаты. Связанные с этим предвзятости отчётности (избирательная отчётность о результатах, предвзятость по времени задержки и языковая предвзятость) действуют в том же направлении. Поскольку метаанализ объединяет всё, что может быть получено, этот отбор может завышать суммарный эффект. Воронкообразная диаграмма отображает эффект каждого исследования в зависимости от его точности; при отсутствии предвзятости точки рассеиваются симметрично, в то время как пробел среди небольших, менее точных исследований предполагает отсутствие отрицательных результатов, что часто называют эффектами малых исследований. Регрессионный тест Эггера и ранговый корреляционный тест Бегга количественно оценивают асимметрию воронкообразной диаграммы, а метод trim-and-fill вменяет исследования, которые, как подразумевает асимметрия, отсутствуют, и пересчитывает скорректированную оценку. Ни один из этих инструментов не может с уверенностью отличить предвзятость публикаций от истинной гетерогенности, поэтому проспективная регистрация исследований и протоколов является более фундаментальной гарантией.

Clinical relevance

Предвзятость публикаций может привести к тому, что вмешательство будет выглядеть более эффективным или безопасным, чем показали бы полные данные, что важно, когда обзоры используются для формирования рекомендаций и политики. Оценка того, рассматривал ли метаанализ этот риск, является частью оценки его надёжности. Эта статья объясняет, как возникает и исследуется предвзятость; это справочный материал для оценки доказательств, а не совет для отдельного пациента.

Epidemiology

Эмпирические исследования, отслеживающие когорты зарегистрированных испытаний и исследований, финансируемых грантами, неоднократно показывали, что статистически значимые результаты публикуются чаще и раньше. Изучение воронкообразных диаграмм и тесты на асимметрию регулярно сообщаются в метаанализах, а регистрация испытаний (например, через проспективные реестры и политику регистрации журналов) была принята отчасти для противодействия этой проблеме.

Evidence & guidelines

Рекомендации по изучению и интерпретации асимметрии воронкообразных диаграмм в метаанализах рандомизированных испытаний были изложены Стерном и соавт. (2011) и широко применяются; стандарты отчётности, такие как PRISMA, побуждают рецензентов оценивать риск предвзятости из-за отсутствующих результатов. Это методологические рекомендации, а не руководство по лечению.

History

Недостаточная публикация отрицательных результатов была описана в 1950-х и 1960-х годах и кристаллизовалась как проблема «картотечного ящика» (file-drawer problem) в конце 1970-х годов. Методы её обнаружения развивались в 1990-х годах: Бегг и Мазумдар (1994) предложили ранговый корреляционный тест асимметрии воронкообразной диаграммы, а Эггер и коллеги (1997) представили простой регрессионный тест, который получил широкое распространение. Дюваль и Твиди (2000) добавили корректировку методом trim-and-fill, а Стерн и соавт. (2011) позднее консолидировали руководство по интерпретации воронкообразных диаграмм. Регистрация испытаний появилась параллельно как структурное средство.

Debates

Что на самом деле указывает асимметрия воронкообразной диаграммы?

Асимметрия может отражать предвзятость публикаций, но также и истинную гетерогенность, различия в качестве исследований или случайность, поэтому тесты на асимметрию чувствительны к причинам, отличным от избирательной публикации, и могут вводить в заблуждение, когда исследований мало.

Насколько можно доверять корректировке методом trim-and-fill?

Метод trim-and-fill вменяет гипотетически отсутствующие исследования и пересчитывает оценку, но он основан на сильных допущениях о форме воронки и может пере- или недокорректировать, поэтому он обычно рассматривается как анализ чувствительности, а не как окончательная корректировка.

Key figures

• Matthias Egger
• George Davey Smith
• Colin Begg
• Sue Duval
• Richard Tweedie
• Jonathan Sterne

Seminal works

• egger-1997
• duval-tweedie-2000
• begg-mazumdar-1994
• sterne-2011-funnel

Frequently asked questions

Что такое воронкообразная диаграмма и как она связана с предвзятостью публикаций?

Воронкообразная диаграмма отображает оценку эффекта каждого исследования в зависимости от его точности. При отсутствии предвзятости исследования рассеиваются симметрично вокруг объединённого эффекта; пробел среди меньших, менее точных исследований, особенно со стороны неблагоприятных результатов, предполагает, что некоторые отрицательные исследования могут отсутствовать в опубликованных данных.

Могут ли статистические тесты доказать наличие предвзятости публикаций?

Нет. Такие тесты, как тесты Эггера и Бегга, обнаруживают асимметрию воронкообразной диаграммы, которая может возникать из-за предвзятости публикаций, но также из-за истинной гетерогенности, качества исследования или случайности. Они повышают или понижают подозрение, а не доказывают причину, и проспективная регистрация исследований является более надёжной гарантией, чем любой постфактумный тест.