Почему исследования питания противоречат друг другу
Самая шумная область медицины и небольшое ядро, которое в ней держится прочно
Исследования о питании противоречат друг другу чаще других медицинских работ, потому что опираются в основном на наблюдения: большую группу людей расспрашивают о еде и годами следят, кто чем заболел. Рацион вспоминают по опроснику, «здоровые» привычки ходят пачками, а распределить рацион жребием на двадцать лет нельзя, поэтому выводы о продуктах то и дело меняют знак. Прочно держится небольшое ядро: связь избытка калорий с набором веса, курения с раком лёгкого и вред избытка алкоголя.
Смещения наблюдательных исследований питания. PREDIMED, 2013 и 2018. Устойчивое ядро: калории и вес, курение, избыток алкоголя · 25 мин · обновлено 15.09.2026
После урока вы сможете
- Называть три причины, по которым исследования питания шумят сильнее прочих
- Понимать, почему разворот заголовка чаще говорит о дизайне работы, чем о новом знании
- Читать результат рандомизированного исследования питания вместе с его границами
- Отличать устойчивое ядро знаний о питании от шумной периферии
- Видеть в отзыве и переопубликации статьи работу проверки, а не повод не верить науке
Одну и ту же новость о еде вы, скорее всего, читали дважды: сначала «яйца вредны для сердца», потом, спустя несколько лет, «опасность яиц преувеличили».
Так выглядит почти любая тема о питании, если следить за ней достаточно долго. Продукт объявляют опасным, потом безобидным, потом снова подозрительным. Со стороны кажется, что наука не может определиться и ходит по кругу. Само это ощущение уже вредит, потому что из него вырастает недоверие сразу ко всему.
Объяснение у чехарды есть, и дело не в легкомыслии исследователей. Самой шумной областью медицины питание делает само его устройство, а не небрежность. Причин у шума три, и ни одна из них не в том, что учёным лень проверять. Урок разбирает все три, а потом называет то, что здесь всё-таки держится прочно.
Данные, которых никто не измерял
Начать стоит с того, откуда берутся числа. Обычная работа о питании устроена так: большую группу людей расспрашивают о еде и наблюдают за ней годами, отмечая, кто чем заболел. Это когортное исследование, то есть наблюдение вперёд во времени, без всякого вмешательства исследователя.
Расспрашивают чаще всего пищевым опросником. Человеку дают длинный список продуктов и просят вспомнить, как часто он ел каждый за последний год. Заодно приходится оценить размер порции, на глаз и по памяти. Это не изъян отдельной работы, а обычный инструмент целой области, которую называют пищевой эпидемиологией.
Проверьте на себе: сколько раз за прошедший год у вас на столе была рыба. Точного числа нет ни у кого, и вместо воспоминания человек выдаёт оценку. Складывается она из привычного распорядка, из нескольких недавних дней и из представления о том, как обычно бывает.
Отсюда первая причина шума, и лежит она в самом основании. Данные о рационе не измерения, а воспоминания. Вся статистика дальше считается по этим числам, какими бы они ни были. Упрёка исследователям тут нет: другого источника сведений о тарелке у них попросту не существует.
Почему неточность здесь опаснее, чем кажется
Неточность бывает двух сортов, и путать их не стоит. Если человек ошибается в обе стороны случайно, картина просто размывается: связь становится слабее и хуже видна. Такая ошибка мешает найти эффект, но не создаёт его на пустом месте.
Хуже, когда ошибка сдвинута в одну сторону и связана с самим человеком. Тот, кто считает свой рацион правильным, может вспоминать его иначе, чем тот, кто своим недоволен. Тогда искажение приходит не поровну, и в данных появляется разница, которой на тарелках не было. Проверить, случилось ли такое в конкретной работе, изнутри её данных нечем.
Такой сдвиг называют ошибкой воспоминания, и от числа участников он не уменьшается. Сто тысяч человек, вспоминающих одинаково неточно, дают сто тысяч одинаково сдвинутых записей. Большая выборка лечит случайный разброс и ничего не делает с систематическим перекосом.
Число участников в новости о питании звучит как гарантия и ею не является. Оно уменьшает случайный разброс, то есть ту часть неопределённости, которая при таких размерах и так невелика. Систематический сдвиг, идущий от самого способа собирать данные, остаётся ровно таким же, каким был при тысяче.
Привычки ходят пачками
Вторая причина знакома по третьему уроку. Человек, который регулярно ест овощи, обычно делает и многое другое. Он чаще двигается, реже курит, аккуратнее спит, чаще бывает у врача и в среднем обеспеченнее. Список этот можно продолжать, и в том вся беда.
Каждое из этих обстоятельств само по себе связано с продолжительностью жизни. В данных они склеены в один ком: кто выбрал одну «правильную» привычку, обычно выбрал и остальные. Разделить ком статистикой не выходит, потому что поодиночке эти привычки почти не встречаются.
Так работает скрытый фактор, то есть обстоятельство, связанное и с выбором, и с исходом. Заслуга достаётся тому, что попало в опросник, а сработать могло что угодно из остального. Явление настолько частое, что получило собственное имя: эффект здорового потребителя.
Курс уже видел, чем это заканчивается, на другом материале. Десятилетиями наблюдения показывали, что заместительная гормональная терапия защищает сердце, а рандомизированная проверка защиты не подтвердила. Разбор этой истории целиком идёт в уроке 9.
Почему рацион почти нельзя рандомизировать
Против скрытых факторов есть надёжное средство: жребий. Он не спрашивает, кто есть кто, и потому уравнивает группы сразу по всему. Распределить по группам лекарство можно, а распределить рацион на двадцать лет нельзя. Это третья причина шума, и она самая непреодолимая.
Препятствий сразу несколько, и каждого хватило бы поодиночке. Людей не удержать годами на назначенном питании: они едят то, что едят. Ослепить участника тоже невозможно, ведь человек видит свою тарелку и знает, в какой он группе.
Добавьте сюда сроки. Болезни, ради которых всё затевается, развиваются десятилетиями, а работа с выдачей еды по протоколу столько не живёт. Поэтому рандомизированные исследования питания обычно короткие и меряют не болезнь, а показатель вроде холестерина. Чем опасна такая подмена, разбирает урок 6.
Сравните это с проверкой лекарства. Таблетку легко выдать и легко проследить, а ослепление устраивается двумя одинаковыми на вид упаковками. У рациона нет ни одного из этих удобств, и потому верхняя ступень лестницы доказательств для питания почти закрыта. Почти, но не совсем, и единственное исключение стоит разобрать подробно.
Как выглядит редкое исключение
Крупные рандомизированные работы о питании всё-таки бывают, и самая известная из них называется PREDIMED. В неё включили 7447 человек с высоким сердечно-сосудистым риском и разделили их жребием на три группы. Две получали средиземноморский рацион: одна с оливковым маслом (2543 человека), другая с орехами (2454). Третьей группе из 2450 человек давали советы снизить долю жиров.
Важно, что именно измеряли. Не холестерин и не вес, а клинический исход: инфаркт, инсульт или смерть от сердечно-сосудистой причины. Медиана наблюдения составила 4,8 года, а это столько же, сколько живёт целое поколение диетических заголовков.
Теперь результат, и сразу в двух видах. В средиземноморских группах случалось 8,1 и 8,0 случая на 1000 человеко-лет, а в группе сравнения 11,2. Разница составила около трёх случаев на тысячу человеко-лет, то есть примерно 28 % относительного снижения. Оба числа описывают одно и то же событие, и урок 4 объясняет, почему второе без первого читать нельзя.
Оговорка о применимости здесь особенно нужна. Участниками были люди с высоким сердечно-сосудистым риском, а не все подряд. Сравнивали рацион целиком, а не отдельный продукт, и исход считали сердечно-сосудистый, а не любой. Перенести этот вывод на здорового человека, на одну ложку масла или на другую болезнь означает выйти за пределы данных.
Дизайн: рандомизированное сравнение трёх групп. Участников 7447, все с высоким сердечно-сосудистым риском. Измеряли клинический исход: инфаркт, инсульт или смерть от сердечно-сосудистой причины. Медиана наблюдения 4,8 года. Четыре пункта названы полностью, и именно они очерчивают круг, внутри которого ответ что-то значит.
Отзыв, который не отменил вывод
У этой работы есть вторая половина, ради которой курс её и берёт. В 2018 году статью отозвали и переопубликовали: обнаружилось, что жребий был нарушен примерно у 1588 участников из 7447. В одном центре распределяли не людей, а клиники целиком. Где-то в одну группу записывали членов семьи без всякого жребия.
Нарушение всплыло после стороннего статистического разбора и подтвердилось проверкой авторов. После пересчёта, уже без нарушенной части, вывод устоял. То есть отзыв статьи здесь не отменил результат, а показал его настоящую цену.
Отсюда и позиция реестра, который относит к мифам утверждение «отзыв статьи: признак того, что науке нельзя верить». Отзыв означает, что механизм проверки сработал, а не что он сломался. Область без отзывов отличалась бы не отсутствием ошибок, а отсутствием их поиска.
Заодно история показывает, до чего трудно рандомизировать питание. Нарушения вышли не от небрежности, а оттого, что делить людей на рационы в живой клинике неудобно. Даже лучшая работа этой области стоила авторам пересчёта и публичного признания ошибки.
Что теряется по дороге к заголовку
Сложив три причины, можно увидеть весь путь целиком. Настоящий рацион превращается в воспоминание, а воспоминание в цифру опросника. Цифра попадает в сравнение групп, которые различались далеко не только едой. Между тарелкой и заголовком стоит пять переходов, и ни один из них не бесплатный.
Дальше результат сжимается в одно число, а число в заголовок. На каждом переходе теряется часть точности, и потери эти не случайны. Заголовок звучит увереннее исходной работы, потому что оговорки выпадают первыми.
Злого умысла в этой цепочке нет. Каждый её участник делает свою работу честно, а неопределённость накапливается сама собой. Именно поэтому одна и та же тема разворачивается: у слабого сигнала знак меняется от мелочей.
Почему меняется именно знак
У этого места есть тонкость, ради которой стоит задержаться. Когда настоящий эффект велик, шум ему не мешает: он виден при любом разумном способе счёта. Когда эффект мал, знак результата начинает зависеть от решений, принятых по дороге.
Решений этих в любой работе десятки. Кого исключить из анализа, какие поправки внести, за какой период считать, чем измерить достаток. Каждое защитимо по отдельности, а вместе они двигают результат в обе стороны. Помогает объявленный заранее план анализа, но в наблюдательных работах о питании он есть далеко не всегда.
Отсюда главный вывод о разворотах в питании. Смена знака в заголовке обычно означает не новое знание, а другой дизайн и другой способ счёта. Проверять поэтому стоит не свежесть новости, а устройство работы, которая за ней стоит.
Что здесь держится прочно
Из всего сказанного очень легко сделать неверный вывод: раз всё шумит, о еде ничего не известно. Вывод этот неверен, и самое полезное, что можно унести из урока, состоит в различении шумной периферии и устойчивого ядра. Ядро есть, оно небольшое и держится прочно. Различать нетрудно, если знать признак, по которому это делается.
Избыток калорий и вес. Если энергии приходит больше, чем расходуется, масса тела растёт. Связь эта проверялась множеством способов и не меняет знак год от года.
Курение. Связь курения с раком лёгкого установлена без единого рандомизированного исследования и остаётся одной из самых надёжных в медицине. Держится она на силе связи и на повторяемости в разных странах и группах. Это же лучший ответ тем, кто считает наблюдательные работы бесполезными.
Избыток алкоголя. Вред избытка алкоголя относится к тому же устойчивому ядру. Обратите внимание, как это сформулировано: речь именно про избыток. Вопрос о том, где проходит его граница и что происходит с малыми количествами, стоит отдельно, и урок его не решает.
Общее у трёх пунктов одно, и его стоит назвать прямо. Эффект в них крупный, он повторяется у разных исследователей и в разных странах и не разваливается при смене способа счёта. Шумная периферия устроена наоборот: эффект мал, а способов посчитать много.
Перечисленное описывает, что известно, и ничего не предписывает. Курс не даёт диет и не назначает питания, потому что задача у него другая: объяснить, как читать доказательства. Что делать с этим знанием в своём случае, человек решает сам, а в медицинской части вопроса вместе с лечащим врачом.
Что спрашивать у новости о еде
Приём этого урока состоит из трёх вопросов, заострённых под питание. Откуда взялись данные о рационе: из опросника по памяти или из чего-то более твёрдого? С кем сравнивали и чем сравниваемые люди ещё различались? И третий, уже про сам вывод: относится ли он к людям, похожим на вас по возрасту, здоровью, стране и обычному рациону?
Первые два спрашивают про устройство работы, а не про её вывод, и в этом вся суть приёма. Третий спрашивает про применимость, которая до новости почти никогда не доходит, хотя в самой работе обычно записана. Ответ «наблюдение по опроснику» не означает, что работа плохая, а означает, что вывод из неё осторожный.
Полный разбор новости о здоровье устроен шире и годится для любой темы: шесть вопросов урока 20. Эти же три вопроса служат узким инструментом, и хороши они тем, что в питании отсеивают большую часть шума с первого захода. Заменять ими общий список не стоит: они молчат о том, относительное число перед вами или абсолютное.
Чего из этого урока не следует
Первое: из него не следует, что наблюдательные исследования бесполезны. Связь курения с раком лёгкого добыта именно ими и добыта надёжно. Наблюдение слабо там, где эффект мал, а различий между группами много.
Второе: из неопределённости не следует, что верить можно кому угодно. Продавец уверенной схемы питания знает не больше исследователя, а осторожен заметно меньше. Неопределённость даёт причину говорить точнее, а не повод слушать того, кто говорит громче.
И третье, ради чего написан весь курс. Ни одна фраза этого урока не годится как основание что-то начать или бросить. Курс не даёт диет, а при болезнях, где рацион входит в лечение, решение принимается лечащим врачом вместе с пациентом. Умение читать доказательства нужно затем, чтобы разговор с врачом стал точнее, а не затем, чтобы его заменить.
Разговор о питании особенно легко превращается в советы, и здесь их нет намеренно. Курс не назначает рационов, не делит продукты на хорошие и плохие и не даёт оснований менять назначенное лечебное питание. Если рацион входит в лечение, его определяет лечащий врач вместе с пациентом и по конкретному случаю.
Что дальше
Питание не единственная шумная тема, и следующие два урока разбирают соседние. Урок 17 берёт витамины и добавки, где вопрос звучит точнее: подтверждённый дефицит и приём «на всякий случай» представляют два разных случая с разными ответами. Граница между ними задаёт самое важное различение всего модуля.
Урок 18 разбирает обмен веществ и вес: область, где бытовые формулы обгоняют знание сильнее всего. Оба урока держатся того же различения, что и этот. Сначала спрашиваем, как устроена проверка, и только потом читаем вывод.
Ключевые исследования
| PREDIMED, средиземноморский рацион | 2013 | Рандомизированное сравнение трёх групп, 7447 человек с высоким сердечно-сосудистым риском: 2543 на средиземноморский рацион с оливковым маслом, 2454 на тот же рацион с орехами, 2450 на советы снизить долю жиров. Измеряли клинический исход: инфаркт, инсульт или смерть от сердечно-сосудистой причины. Медиана наблюдения 4,8 года. Частота исхода составила 8,1 и 8,0 случая на 1000 человеко-лет против 11,2 в группе сравнения. |
| PREDIMED, отзыв и переопубликация | 2018 | Разбор рандомизации в той же работе на 7447 участниках. Нарушение жребия примерно у 1588 из них всплыло после стороннего статистического разбора и подтвердилось проверкой авторов: в одном центре по группам распределяли клиники целиком, где-то в одну группу включали членов семьи без жребия. Статью отозвали и переопубликовали, и после пересчёта вывод устоял. |
Что подтвердилось, а что нет
Данные о рационе собираются по памяти, а «здоровые» привычки ходят пачками, поэтому слабый сигнал легко перепутать с чужим влиянием. Долгих рандомизированных проверок почти нет: людей нельзя годами держать на назначенном рационе. Статус читается буквально: не «всё выдумано», а «вопрос не закрыт» по большинству отдельных продуктов и веществ.
Установлена без единого рандомизированного исследования, потому что такое исследование невозможно ни технически, ни этически. Держится она на силе связи и на повторяемости в разных странах и группах. Случай показывает, что наблюдение бывает надёжным: слабым его делает не сам метод, а малый эффект на фоне множества различий между людьми.
В 2018 году крупнейшее рандомизированное исследование питания отозвали и переопубликовали: жребий оказался нарушен примерно у 1588 участников из 7447. Нарушение всплыло после стороннего статистического разбора и подтвердилось проверкой авторов. После пересчёта вывод устоял. Отзыв означает, что проверка сработала: область без отзывов отличалась бы не отсутствием ошибок, а отсутствием их поиска. Различать при этом обязательно: отзыв по найденной ошибке и отзыв по подлогу совсем разные события.
Термины
- когортное исследованиеcohort study
- Наблюдение за большой группой вперёд во времени: кто как живёт в начале и кто чем заболевает потом. Вмешательства исследователя нет.
- пищевой опросникfood frequency questionnaire
- Список продуктов с вопросом, как часто человек ел каждый за прошедший срок. Главный источник данных в исследованиях питания и главный источник их неточности.
- ошибка воспоминанияrecall bias
- Искажение данных о прошлом из-за того, что участники вспоминают неточно и по-разному. От числа участников не уменьшается.
- эффект здорового потребителяhealthy user effect
- Свойство людей, выбравших любую «правильную» привычку, отличаться от остальных ещё десятком обстоятельств. Из-за него наблюдение приписывает одной привычке заслугу всех сразу.
- скрытый факторconfounder
- Обстоятельство, связанное и с выбором лечения, и с исходом. Создаёт видимость связи там, где её нет, и не обязано быть измеренным или даже названным.
- применимостьexternal validity
- Степень, в которой вывод исследования переносится на людей за пределами его участников. Определяется тем, кого включали и кого исключали.
- пищевая эпидемиологияnutritional epidemiology
- Изучение связи питания с болезнями по наблюдательным данным о больших группах людей. Область, где смещения работают сильнее, чем почти везде в медицине.
- отзыв статьиretraction
- Изъятие опубликованной работы из научной литературы из-за найденной ошибки, нарушенного дизайна или подлога. Причины эти разные, и различать их обязательно.
Практикум · Разобрать одну новость о еде
Урок проверяется на первой же попавшейся новости о питании, и на разбор уходит минут двадцать. Задача не в том, чтобы поймать журналиста, а в том, чтобы увидеть расстояние между работой и заголовком. Расстояние это почти всегда больше, чем кажется при чтении.
- Возьмите любую свежую новость о питании, попавшуюся случайно, а не выбранную как заведомо сомнительная. Выпишите заголовок дословно: с ним придётся сравнивать всё остальное.
- Найдите исследование, о котором идёт речь, хотя бы по фамилиям авторов и названию журнала. Если в новости нет ни ссылки, ни фамилии, ни журнала, дальше идти уже некуда, и это первый честный результат разбора.
- Определите дизайн: наблюдение за группой или распределение по жребию. Для питания почти всегда окажется первое, и это нормально. Смотреть надо, соответствует ли дизайну громкость вывода.
- Выясните, как измеряли рацион: опросник по памяти, дневник питания или что-то ещё. Запишите, за какой срок люди вспоминали: год воспоминаний и три дня записей дают очень разные данные.
- Сравните вывод работы с заголовком новости и отметьте, что добавилось по дороге. Обычно добавляются уверенность и совет, а пропадает перечень тех, к кому вывод не относится.
Вопросы для самопроверки
Исследование питания опросило сто тысяч человек. Что именно даёт такой размер?
- Уверенность, что найденная связь настоящая: на ста тысячах человек и случайность, и посторонние причины отпадают
- Защиту от того, что люди неточно вспоминают свой рацион: при таком числе анкет ошибки памяти гасят друг друга
- Меньший случайный разброс оценки, и ничего сверх этого
- Возможность обойтись без группы сравнения: чем крупнее работа, тем меньше она в такой группе нуждается
В PREDIMED исход случался с частотой 8,1 и 8,0 на 1000 человеко-лет против 11,2 в группе сравнения. Как это правильно прочитать?
- Разница около трёх случаев на тысячу человеко-лет, она же примерно 28 % относительного снижения
- Средиземноморский рацион снижает риск втрое, и это самый крупный эффект, известный в питании
- В абсолютных числах разницы нет, она появляется только при переводе в относительные
- Вывод относится ко всем взрослым людям без исключения, независимо от исходного риска
Почему долгих рандомизированных исследований о питании почти нет?
- Такие исследования запрещены этическими комитетами как вмешательство в частную жизнь
- Их результаты не берут в научные журналы, потому что рацион считается ненадёжным данным
- Рацион невозможно измерить приборами, а без измерения жребий теряет всякий смысл
- Людей нельзя годами держать на назначенном рационе, а ослепить участника невозможно
Что из перечисленного относится к устойчивому ядру, а не к шумной периферии?
- Польза конкретного продукта для сердца
- Связь избытка калорий с набором веса
- Наилучшее время ужина
- Порядок, в котором подают и едят блюда за столом
Крупное исследование питания отозвали и переопубликовали, когда после стороннего статистического разбора авторы нашли нарушение жребия. Что это означает?
- Что результаты были подделаны, а отзыв стал признанием подлога
- Что рандомизированные исследования питания бесполезны и делать их дальше незачем
- Что проверка сработала: ошибку нашли, пересчитали, и вывод после пересчёта устоял
- Что науке в вопросах питания верить нельзя, раз даже лучшая работа оказалась с изъяном
Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.
Что читать
- Cochrane Library, открытые резюме систематических обзоров: Полезно увидеть, как формулируют вывод, когда доказательства слабые. Фразы «данных недостаточно» и «уверенность в оценке низкая» для темы питания обычны, а в новостях они не появляются никогда.
- PREDIMED: отзыв статьи и переопубликация, 2018: Полезно прочесть само сообщение об отзыве: авторы перечисляют, где именно жребий был нарушен, и показывают пересчёт. Так выглядит исправление ошибки изнутри, а не скандал снаружи.