Систематический обзор: способ не выбирать удобные исследования

Систематический обзор это сведение всех работ по одному вопросу по правилам поиска и включения, объявленным заранее. Главное в нём не количество собранных работ, а то, что правило, объявленное до поиска, лишает автора возможности отобрать удобные. Если результаты можно сложить численно, обзор дополняют метаанализом.

Место на лестнице доказательств

Лестница доказательств снизу вверх выглядит так: мнение специалиста и личный опыт, описание отдельного случая и серия случаев, исследование «случай и контроль», когортное исследование, рандомизированное контролируемое исследование и наверху систематический обзор с метаанализом качественных рандомизированных работ.

Наверху лестницы стоит не исследование, а способ обращаться с исследованиями. Систематический обзор собирает и удачные, и неудачные, и опубликованные работы, и найденные в регистрах. Отдельная работа попадает в новости избирательно: громкий результат печатают, скучный реже, а неудавшийся иногда не печатают совсем. Обзор ищет и то, что осталось непрочитанным, и потому даёт менее радужную и более верную картину.

Чем отличается от обычного обзора

Статья, где автор перечисляет исследования, которые счёл нужным упомянуть, тоже называется обзором. Систематическим её делает объявленное заранее правило: какие базы искать, по каким словам, какие работы включать и какие исключать, как оценивать их качество. Разница между двумя видами обзоров больше, чем между соседними ступенями лестницы.

Метаанализ это статистическая часть: объединение численных результатов нескольких работ в одну оценку с интервалом. Систематический обзор без метаанализа бывает, когда работы слишком разные, чтобы их складывать. Метаанализ без систематического поиска бывает и опасен: складывают то, что удобно нашлось.

Где ошибаются

Первая ошибка: верить обзору только за то, что он систематический. Обзор наследует качество включённых работ, и сведение слабых исследований даёт слабый вывод, пусть и аккуратно оформленный. Поэтому хорошие обзоры отдельно оценивают риск смещения каждой работы.

Вторая ошибка: считать иерархию приговором отдельным работам. Лестница расставляет типы исследований, и плохо сделанное исследование верхнего типа бывает слабее хорошего нижнего. Смотреть приходится и на тип, и на конкретную работу.

Вопросы

Чем систематический обзор отличается от метаанализа?

Систематический обзор это процедура поиска и отбора всех работ по вопросу. Метаанализ это статистическое объединение их численных результатов. Метаанализ обычно входит в систематический обзор, но не всегда возможен.

Где искать систематические обзоры?

В базах медицинской литературы, прежде всего в Кокрейновской библиотеке и PubMed, где их можно отфильтровать по типу публикации.

Почему систематический обзор надёжнее отдельного исследования?

Потому что он учитывает все работы по вопросу, включая неудачные и неопубликованные, а не одну, случайно оказавшуюся на виду. Одна работа могла получить результат случайно.