Корреляция не означает причинность
Четыре объяснения любой связи, один разобранный третий фактор и что значит слово «значимо»
Корреляция означает совместное изменение двух величин без всякого утверждения о причине. У любой найденной связи четыре объяснения: X вызывает Y, Y вызывает X, оба показателя двигает третий фактор либо связь случайна, и сама корреляция между ними не выбирает. Слово «значимо» тоже не про величину: на большой выборке значимость достигается почти всегда, а «много это или мало» отвечает размер эффекта.
Модуль IV. Числа и данные · навыки Г1 · 19 мин · обновлено 12.09.2026
После урока вы сможете
- Прогонять четыре объяснения для любой заявленной связи.
- Называть конкретный третий фактор, а не отделываться словом «конфаундер».
- Читать слово «значимо» правильно: оно не про величину и не про важность.
- Понимать, почему случайное разделение отрезает альтернативные объяснения.
Вот факт, подтверждённый данными за много лет: в месяцы, когда продаётся больше мороженого, тонет больше людей. Связь устойчивая, воспроизводится из года в год.
Вывод очевиден: мороженое вызывает утопления. Запрет эскимо на пляжах спасёт сотни жизней.
Ты уже улыбаешься, потому что видишь третьего игрока: лето. Жара гонит людей и к холодильнику с мороженым, и к воде, так что перед нами два следствия одной причины, которые друг на друга не влияют вовсе. Но заметь: улыбаешься ты потому, что пример прозрачный. Замени мороженое на «завтраки школьников», а утопления на «оценки», и тот же самый трюк соберёт тысячи репостов и продаст миллион коробок хлопьев.
Этот модуль про самообман числами. В модуле 3 тебя обманывал собственный мозг, а здесь обманывают данные, точнее, выводы, приклеенные к данным. Начнём с главного клея.
Что такое корреляция и почему мозг читает её как причинность
Корреляция это всего лишь «меняются вместе»: когда растёт одно, растёт или падает другое. Точка. В самом слове нет ни стрелки, ни причины, есть только совместность.
У корреляции есть две характеристики, и их полезно различать. Направление: прямая связь (растёт одно, растёт и другое) или обратная. Сила: насколько плотно точки ложатся вдоль линии. Силу принято выражать числом от −1 до 1. Ноль означает отсутствие линейной связи, а единица указывает на идеальное совпадение. Важно, что это мера именно прямолинейной связи: если зависимость есть, но изогнута дугой, коэффициент способен показать ноль при очевидной глазу закономерности.
Но мозг не выносит совместности без истории. Быстрая система из прошлого модуля работает как великий рассказчик: увидев два связанных ряда, она мгновенно сочиняет сюжет «первое вызывает второе» и выдаёт его как очевидность. Поэтому заголовок «Учёные обнаружили связь между X и Y» читается как «X вызывает Y», хотя написано в нём совсем не это.
Четыре объяснения любой корреляции
Дисциплина мышления здесь сводится к одному упражнению: увидев связь «X коррелирует с Y», прогнать в голове четыре кандидата.
Кандидат 1: X действительно вызывает Y. Бывает! Курение и рак лёгких коррелируют, потому что первое вызывает второе. Причинные связи существуют, но вопрос в том, что корреляция сама по себе их не доказывает.
Кандидат 2: наоборот, Y вызывает X. Обратная стрелка. Возьмём «У счастливых пар совместные хобби». Может, хобби делает пары счастливыми? А может, счастливым парам просто легко находить общие занятия: стрелка смотрит в другую сторону, а совет «заведите хобби» копирует следствие в надежде получить причину.
Кандидат 3: третий фактор Z двигает обоих. Наше лето с мороженым. В примере «В городах с большим числом пожарных больше пожаров» Z равен размеру города. Третий фактор оказывается самым частым ответом в реальных заголовках, и его поиск стоит сделать рефлексом: что могло бы двигать оба показателя сразу?
Кандидат 4: совпадение. Если перебрать тысячи пар показателей, какие-то совпадут просто так. Целая коллекция таких находок живёт на сайте Тайлера Вигена, где собраны пары вроде «число фильмов с Николасом Кейджем и утонувшие в бассейнах». Числа оттуда мы не приводим, и вот почему: классических пар в нынешней базе сайта уже нет, а старые значения нам подтвердить не удалось. Смысл коллекции и без чисел понятен: сам автор описывает её как развлечение, где перебрано больше шестисот миллионов сочетаний. Смешно до того момента, пока такую же случайную пару не подадут всерьёз.
Фраза «Люди, которые пьют кофе, реже страдают депрессией» повторяет реальный тип заголовка. Прогони четыре кандидата: какие объяснения, кроме «кофе лечит», обязаны быть проверены?Показать ответ
обратная стрелка, то есть депрессия, возможно, снижает желание и силы пить кофе с людьми (Y влияет на X). Третий фактор, когда уровень социальности, работы, сна и здоровья двигает и кофейные привычки, и риск депрессии. И совпадение при переборе, ведь связь, выловленная из сотен продуктов, может быть шумом. Заметь: «кофе помогает» не исключено, оно просто одно из четырёх, а заголовок продал его как единственное.
Разберём один третий фактор до конца
Сказать «тут возможен третий фактор» умеет каждый после этой лекции. Полезнее уметь показать, как именно он делает связь из ничего. Разберём на выдуманном, но правдоподобном примере. Числа здесь мои, иллюстративные.
Пусть в исследовании двести детей: сто восьмилеток и сто четырнадцатилеток. Меряем две вещи, размер обуви и словарный запас. Внутри восьмилеток связи нет: у кого нога больше, тот не знает больше слов. Внутри четырнадцатилеток тоже нет. А в общей таблице на двести человек связь получается сильная и красивая: у старших и нога больше, и слов больше.
Что здесь произошло. Возраст двигал оба показателя, и, свалив две группы в одну кучу, мы получили связь, которой нет ни в одной из них. Заметь свойство, которое делает третий фактор таким опасным: связь настоящая. Она воспроизведётся на новой выборке детей, будет статистически надёжной и не исчезнет от увеличения числа участников. Врёт не число, а вывод, приклеенный к числу.
Проверка называется расслоением: посмотреть на связь внутри однородных групп. Если внутри каждой группы связь пропала, а в общей куче была, вы нашли третий фактор. Именно это делают, когда пишут «с поправкой на возраст, доход и образование».
И сразу граница, чтобы не пережать в другую сторону. Поправки не бесплатны и не всесильны. Поправить можно только на то, что измерено. На «семья, где разговаривают с ребёнком» поправку не сделаешь, потому что такой колонки в данных нет. Поэтому «с поправкой на всё» не бывает, а фраза «мы учли возможные факторы» означает ровно «мы учли те, которые у нас записаны».
Отсюда требование к самому себе, которое стоит завести с сегодняшнего дня. Слово «конфаундер» ничего не стоит, пока за ним не названа конкретная величина. «Тут возможен третий фактор» звучит не как разбор, а как поза. «Тут третьим фактором может быть возраст, и проверяется это так-то» и есть разбор. Если конкретный Z не называется, обычно его и нет в голове у говорящего.
Что значит «значимо»
В новостях про связи почти всегда есть слово «значимая» или «статистически значимая». Читают его как «важная» или «сильная». Оно не значит ни того, ни другого, и на этой подмене держится половина громких заголовков.
Статистическая значимость отвечает ровно на один вопрос: часто ли такая связь получалась бы, если бы связи не было вовсе, а мы просто вытянули случайную выборку. Если такое совпадение выходило бы редко, связь называют значимой. Всё. Про величину связи слово не говорит ничего, а про её важность для жизни тем более.
Два следствия, которые стоит запомнить дословно.
Первое: на большой выборке значимым становится почти всё. Связь, которую невозможно заметить в жизни, на ста тысячах человек уверенно проходит порог. Поэтому рядом со словом «значимо» всегда ищи вторую цифру, которая говорит, насколько велика сама связь. «Значимо» без размера эффекта это сообщение «мы уверены, что это не ноль», и больше ничего.
Второе: чем больше сравнений, тем больше находок. Если проверить триста пар «продукт и болезнь» при обычном пороге, примерно каждая двадцатая окажется значимой сама по себе, даже когда никаких связей нет. Отсюда прямой вопрос к любой такой новости: сколько связей проверяли всего и сколько из них опубликовали? Кандидат 4 из нашего списка не экзотика, а массовое производство.
И оговорка честности: слово «значимо» не ругательство. Это рабочий инструмент, и без него данные читать нельзя. Плохо не оно, а его чтение как «доказано» и «важно». Как этот порог устроен изнутри, разбирает отдельная наука. Тебе на этом уровне достаточно двух вопросов: насколько велика связь и сколько всего проверяли.
Как всё-таки доказывают причинность
Если корреляция не доказывает, что тогда доказывает? Ответ науки: эксперимент со случайным разделением. Возьми людей, раздели монеткой на две группы, одной дай X, другой не дай, а потом сравни Y.
Монетка здесь не небрежность, а суть метода. Она делает попадание в группу независимым от любых свойств участника: возраст, привычки, доход, мотивация размазываются поровну, включая то, что никто не догадался измерить. В этом её главное преимущество перед поправками: поправить можно только на записанное, а монетка достаёт и незаписанное. Одна оговорка обязательна, и без неё утверждение становится неверным: монетка уравнивает группы в среднем по повторениям, а не в каждом отдельном опыте. На восьмерых участниках она вполне может собрать всех крепких в одну группу. Поэтому расхождение по Y служит сильным доводом в пользу X, но не приговором: остаются случайный перекос, выбывшие по дороге и разное обращение с группами.
Сравнивать «тех, кто сам записался на тренинг» с «теми, кто не записался» бесполезно: записавшиеся отличаются мотивацией ещё до тренинга. Сравнивать «до и после» тоже слабо: между «до» и «после» произошло ещё сто событий, включая сезон.
Отсюда главный вопрос к любому «учёные выяснили»: это эксперимент или наблюдение? Наблюдение даёт кандидатов на причину. Эксперимент проверяет их. Оба жанра полезны, но выводы у них разного веса, а заголовки эту разницу стирают в первую очередь.
Последнее, чтобы не остаться с ощущением, что без эксперимента ничего узнать нельзя. Многое узнать можно, просто дороже. Что курение вызывает рак лёгких, доказали без единого рандомизированного опыта на людях, сложением многих независимых линий: доза и ответ, время, животные, механизм, падение риска после отказа. Правило звучит так: одна корреляция ничего не решает, а десяток разных подходов, сошедшихся в одной точке, решает многое.
Компания хочет узнать, повышает ли обучение продажников их результаты. Какой дизайн проверки даст причинный ответ и почему «сравнить прошедших тренинг с непрошедшими добровольцами» не годится?Показать ответ
случайно разделить продажников на две группы, одной тренинг сейчас, другой позже, и сравнить продажи. Добровольцы не годятся из-за самоотбора: на тренинг записываются более мотивированные, и их результаты будут выше и без всякого тренинга. Разницу создаст мотивация, а припишут её тренингу. Поправка «мы учли стаж и возраст» тут не спасает: мотивацию никто не измерял, а поправить можно только на измеренное.
Конспект
Корреляция означает «меняются вместе», без стрелки. У неё есть направление и сила, и она видит только прямолинейную связь. Мозг-рассказчик дорисовывает причинность сам. Четыре кандидата для любой связи: X→Y, обратная Y→X, третий фактор Z, совпадение при переборе. Третий фактор делает настоящую связь, которая воспроизводится и не исчезает от роста выборки: сваленные в кучу восьми- и четырнадцатилетние дают связь размера обуви со словарным запасом, которой нет ни в одной из групп. Проверку делают расслоением, а ограничение в том, что поправить можно только на измеренное. «Значимо» означает лишь «при отсутствии связи такое выходило бы редко»: на большой выборке значимым становится почти всё, а при трёхстах сравнениях примерно каждое двадцатое пройдёт порог само собой. Ищи размер эффекта и число проверенных сравнений. Причинность доказывает случайное разделение, ведь монетка уравнивает и то, что никто не измерял, но в среднем по повторениям, а не в каждом отдельном опыте. Вне эксперимента причину устанавливают сложением независимых линий свидетельств. Главный вопрос к заголовку: эксперимент или наблюдение?
Разбор
Корреляция сужает список кандидатов, а это уже много. Она обязывает объяснить себя одним из четырёх способов, и три из них проверяемы: обратную стрелку часто отсекает время, третий фактор ловит расслоение, а совпадение выдаёт повторение на новых данных. К тому же причину устанавливают и вне эксперимента: связь курения с раком лёгких доказана сложением независимых линий, а не единственным рандомизированным опытом. Правильный вывод звучит не как «корреляция бесполезна», а как «одной корреляции мало».
Значимость отвечает на вопрос, часто ли такой результат выходил бы при полном отсутствии связи. О величине связи она не говорит ничего. На выборке в сто тысяч человек значимой становится связь, неразличимая в жизни. При трёхстах проверенных парах примерно каждая двадцатая пройдёт порог сама собой. Читать надо две цифры рядом: размер эффекта и число всех проверенных сравнений.
Случайно разделить людей на курящих и некурящих никто не мог, поэтому вывод собирали сложением независимых линий: зависимость дозы и ответа, порядок во времени, опыты на животных, известный механизм, падение риска после отказа. Каждая линия по отдельности остаётся наблюдением, то есть кандидатом в причины. Вместе они сошлись в одной точке, и другого объяснения такому сходу не нашлось. Оговорка ровно в этом: устояла совокупность, а не отдельная корреляция. Перенести вывод на любую наблюдаемую связь нельзя, она по-прежнему обязана объяснить себя одним из четырёх способов этого урока.
Термины
- корреляцияcorrelation
- Совместное изменение двух величин, без утверждения о причине. Имеет направление (прямая или обратная) и силу, а в обычном виде улавливает только прямолинейную связь.
- третий факторconfounder
- Величина, двигающая оба наблюдаемых показателя сразу и потому создающая между ними связь без всякого влияния друг на друга. Связь при этом настоящая и воспроизводимая, неверен только вывод о причине.
- обратная причинностьreverse causation
- Случай, когда стрелка направлена не туда, куда её читают: не X меняет Y, а Y меняет X. Опознаётся вопросом «а могло ли следствие стоять первым?».
- расслоениеstratification
- Проверка связи внутри однородных групп вместо общей кучи. Если внутри групп связь исчезает, а в куче была, найден третий фактор.
- случайное разделениеrandomisation
- Распределение участников по группам жребием. Делает попадание в группу независимым от всех свойств сразу, включая неизмеренные, и этим отличается от поправок. Уравнивает группы в среднем по повторениям, а не в каждом отдельном опыте.
- статистическая значимостьstatistical significance
- Утверждение «при полном отсутствии связи такой результат получался бы редко». Не говорит ни о величине связи, ни о её важности, а на большой выборке достигается почти всегда.
- размер эффектаeffect size
- Мера того, насколько сильно вмешательство сдвигает результат, в отличие от вопроса «есть эффект или нет». Именно она отвечает на «и что, много это или мало».
- перебор сравненийmultiple comparisons
- Проверка множества пар сразу. Чем больше проверено, тем больше «значимых» находок возникает случайно, поэтому число всех проверенных сравнений становится обязательной частью новости.
Практикум · Три объяснения на каждый заголовок
У любой заявленной связи есть минимум три конкурирующих объяснения. Учимся называть их не задумываясь.
- Соберите пять заголовков вида «учёные выяснили связь между X и Y».
- Для каждого выпишите четыре варианта: X влияет на Y, Y влияет на X, третий фактор Z влияет на оба, совпадение.
- Придумайте правдоподобный Z для каждой пары, конкретный, а не «образ жизни».
- Найдите оригинальное исследование хотя бы для одного заголовка и посмотрите: это эксперимент или наблюдение?
- Ответьте письменно: что нужно было бы сделать, чтобы установить причинность в этом случае?
Вопросы для самопроверки
В городах с большим числом пожарных происходит больше пожаров. Пожарные вызывают пожары?
- Нет: у любой такой пары надо искать третьего кандидата, и здесь это размер города, который увеличивает и число пожаров, и число пожарных
- Да, частично: пожарные иногда сами провоцируют вызовы
- Да: раз оба показателя растут вместе, одно неизбежно вызывает другое
- Да: данные собраны по сотням городов, связь устойчива
«Дети, которые завтракают, лучше учатся. Кормите ребёнка завтраком, и оценки вырастут!» Что упускает вывод?
- Завтраки бывают очень разные: каша и сладкая булка работают на учёбу совсем по-разному
- Здесь работает третий фактор: семьи с налаженным бытом дают и завтрак, и режим, и помощь с учёбой
- Оценки не главное: судить по ним об успехах ребёнка нельзя
- Обратная причинность: это хорошие оценки заставляют ребёнка вставать раньше и завтракать
В городах, где больше библиотек, ниже уличная преступность. Что упускает вывод «библиотеки снижают преступность»?
- Ничего: связь, найденная на данных многих городов, и есть достаточное доказательство
- Третий фактор: устройство города влияет и на библиотеки, и на преступность
- Что корреляция отрицательная: такие связи о причинах вообще ничего не говорят
- Малую выборку: городов в таком исследовании наверняка было слишком мало для выводов
«У счастливых пар есть совместные хобби. Заведите общее хобби, и отношения наладятся». Какая ошибка возможна?
- Никакой: совет безвреден, попробовать хобби всегда полезно
- Слишком мало пар: на такой выборке выводы не делают
- Ошибка выжившего: о распавшихся парах с общим хобби не рассказывают
- Обратная причинность: возможно, это счастливые пары заводят хобби, а не хобби делает счастливыми
Продажи супов и продажи курток растут и падают синхронно. Что разумнее всего предположить?
- Суп продаёт куртки: наевшись горячего, человек идёт гулять и мёрзнет
- Общий фактор тут сезон: холод двигает и то и другое
- Куртки вызывают аппетит к супу
- Совпадение, которое нельзя объяснить
Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.
Что читать
- Tyler Vigen, «Spurious Correlations», Hachette Books, 2015: Коллекция случайных совпадений, собранная перебором сотен миллионов пар. Сам автор называет её развлечением, а полезна она тем, что показывает, как убедительно выглядит чистый шум, если его нарисовать двумя линиями на одном графике.
- Дэвид Шпигельхалтер, «Искусство статистики», глава о причинности: Разбор того, как из наблюдений всё-таки добираются до причин, написанный без формул. Оттуда же удобно взять привычку смотреть на размер эффекта раньше, чем на слово «значимо».