Красные флаги в мета-анализах: как читать их критически

Легко думать, что если объединить данные множества исследований, то получится тот самый истинный «средний эффект». На деле у мета-анализов даже больше ограничений и уязвимостей, чем у отдельных РКИ. Они сложны и объёмны, что затрудняет их критическую оценку.

Но даже при поверхностном осмотре можно заметить признаки, которые должны насторожить клинициста. Вот основные.

Отсутствие регистрации

Если мета-анализ заранее не зарегистрирован (например, на PROSPERO), есть риск, что авторы меняли дизайн по ходу работы. Нередко так «подгоняют» исследование под более привлекательные выводы.

Размытые или слишком широкие критерии включения

Если ко всем работам не применяются одинаковые критерии отбора, обзор теряет значимую часть данных. Но и обратная крайность вредна: включив вообще всё, можно замусорить анализ. Классический пример — включение протоколов с поисковыми, неадекватными дозировками, которое искусственно снижает размер эффекта.

Подозрительно высокий размер эффекта

Если SMD (g или d) превышает 0,7, а тем более единицу, результат крайне сомнителен. Скорее всего, в основе — большое число исследований с листом ожидания или вовсе нерандомизированных работ.

Слишком узкие доверительные интервалы

Это не просто красный, а полыхающий флаг. Узкие интервалы при высокой гетерогенности, характерной для психотерапии, практически невозможны. Как и завышенный размер эффекта, узкий интервал обычно связан с низким качеством дизайна.

Нет оценки рисков смещения и качества доказательств

В мета-анализах важны не столько цифры, сколько история их происхождения. Если большой эффект получен при низком качестве доказательств, воспринимать его как истину в последней инстанции нельзя.

Не задекларированы аффилиации авторов

По-настоящему неаффилированных авторов сегодня встретишь редко. Поэтому отсутствие декларации потенциальных конфликтов интересов, особенно в крупных работах, вызывает сомнения. Иногда достаточно взглянуть на список публикаций автора: обилие его же работ по этому методу уже говорит о риске публикационной предвзятости.

Приукрашивание работы и выводов

Стоит смотреть, как сформулированы «обсуждение результатов» и вывод. Если авторы раз за разом подчёркивают «высокое качество» и «высокий уровень контроля», ничем это не обосновывая, — статья, скорее всего, сильно ангажирована.

Коротко

• Мета-анализ — не автоматический «золотой стандарт»: его качество определяется дизайном и прозрачностью, а не самим фактом объединения данных.
• Насторожить должны: отсутствие регистрации, размытые критерии включения, слишком высокий эффект, слишком узкие доверительные интервалы.
• Отдельно проверяйте оценку рисков смещения, декларацию аффилиаций и язык выводов.
• Большой эффект при низком качестве доказательств — повод для осторожности, а не для доверия.