Обратный вывод в нейронауке
Почему из активации области не следует, что человек делал именно это
Обратный вывод ведёт от активации области к заключению, что выполнялся связанный с ней процесс. Дедуктивно он не обоснован, но количество даваемого им свидетельства измеримо. Расселл Полдрак (2006) посчитал его для зоны Брока по базе BrainMap: если до наблюдения вероятность языковой задачи была 0,5, то после активации она поднимается до 0,69, то есть байесов фактор 2,3, а факторы ниже четырёх принято считать слабым свидетельством.
MIT 9.13 · Poldrack, Trends in Cognitive Sciences, 2006 · Poldrack, Neuron, 2011 · Yarkoni и др., Nature Methods, 2011 · 45 мин · обновлено 01.10.2026
После урока вы сможете
- Различать прямой и обратный вывод и записывать каждый как утверждение об условной вероятности
- Называть условие, при котором обратный вывод несёт информацию, и объяснять, почему участия области в задаче для этого мало
- Оценивать силу обратного вывода по тому, как часто область активна вне интересующего процесса
- Находить в нейроновости шаг, на котором активация превращается в переживание, и переписывать вывод корректно
1 октября 2011 года в New York Times вышла колонка Мартина Линдстрома под названием «You Love Your iPhone. Literally.», в переводе «Вы любите свой айфон. Буквально». Изложенное в ней рассуждение было такое. Участникам давали слушать звонок телефона и смотреть на него, и сообщалось об активации островковой доли. Островковая доля активируется и тогда, когда люди смотрят на изображения близких. Значит, заключал автор, участники испытывают к телефону нечто вроде любви.
Ответ пришёл быстро. Письмо в редакцию организовал Расселл Полдрак. Подписались сорок пять человек, работающих в нейровизуализации. Главный их довод не касался ни выборки, ни статистики. Он был такой. Островковая доля активна примерно в трети всех опубликованных работ по нейровизуализации. Потому сообщение о её активации не отличает привязанность от отвращения, боли, внимания, речи и десятка других вещей.
Случай не первый и не в первой газете. За четыре года до того, 11 ноября 2007 года, вышла колонка «This Is Your Brain on Politics». Команда во главе с Марко Якобони показывала колеблющимся избирателям изображения кандидатов и читала по томограммам их чувства. 14 ноября газета напечатала письмо семнадцати нейроучёных: колонка «использует ошибочное рассуждение, чтобы делать необоснованные выводы», а данные к тому же изложены в прессе без рецензирования.
Ошибка в обоих случаях одна, она называется обратным выводом и устроена достаточно тонко, чтобы разбирать её медленно. Дело не в том, что вывод сделан из плохих данных. Дело в том, что из хороших данных сделан вывод, который из них не следует.
Две импликации, которые путают
Опыт с фМРТ устроен так: человеку задают условия, скажем, читать предложения и рассматривать бессмысленные значки, и ищут воксели, где сигнал в первом условии выше, чем во втором. Такой опыт даёт утверждение вида: если человек занят задачей X, то в области R сигнал выше. Это прямой вывод, от задачи к активации.
Заголовок утверждает обратное: если в области R сигнал выше, то человек занят задачей X. Это обратный вывод, от активации к задаче. Две импликации похожи на вид и не следуют одна из другой, ровно как из «когда идёт дождь, асфальт мокрый» не следует «когда асфальт мокрый, идёт дождь».
Разница видна отчётливее, если записать обе через вероятности. Опыт измеряет вероятность активации при условии, что процесс идёт. Заголовок утверждает вероятность процесса при условии, что видна активация. Связь между этими двумя величинами даёт формула Байеса, и в неё входит третья величина, которую ни один отдельный опыт не измеряет: как часто область активна, когда процесса нет.
В этом весь сюжет. Если область активна почти только при интересующем процессе, обратный вывод несёт много информации. Если она вдобавок активна при десятке других вещей, знание об её активации почти не сужает круг возможностей, и вывод пуст, каким бы аккуратным ни был эксперимент.
Стоит понять, почему подмена проходит так легко. В обычной речи «связано с» симметрично, а условная вероятность несимметрична. В отчёте же обе величины называются одними и теми же словами, «область связана с задачей X». К тому же обратный вывод и есть то, ради чего текст читают: что происходило в голове у человека, интереснее, чем то, где вырос сигнал. Подмена совершается не по небрежности, а по спросу, и чаще всего не автором статьи, а пересказом.
Сколько информации даёт активация
Величину «сколько информации» можно посчитать, и это сделано. Расселл Полдрак в 2006 году взял базу BrainMap, где собраны координаты активаций из опубликованных работ. И спросил: если мы видим активацию зоны Брока, насколько это меняет наше мнение о том, что человек занят языковой задачей?
Ответ отрезвляющий. Пусть до наблюдения шансы были ровно пополам, вероятность 0,5. Тогда после наблюдения активации вероятность поднимается до 0,69. В пересчёте на байесов фактор это 2,3, а факторы ниже четырёх принято считать слабым свидетельством. Зона Брока не случайный пример: это самая известная в науке «языковая» область, названная так полтора века назад. И даже она сдвигает уверенность примерно как один невнятный свидетель.
Для сравнения возьмём случай, где обратный вывод работает лучше. Активация вентрального стриатума повышает правдоподобие того, что в задаче было вознаграждение, с байесовым фактором 9: это уже умеренно сильное свидетельство. Разница между двумя случаями не в качестве данных и не в аккуратности авторов. Она в избирательности: вентральный стриатум вовлечён в заметно более узкий круг задач.
Арифметику стоит один раз проделать руками, на выдуманных, но правдоподобных числах. Пусть область активна в девяти случаях из десяти, когда идёт интересующий процесс. Чувствительность почти идеальная. Пусть при этом она активна в трёх случаях из десяти, когда процесс не идёт. И пусть до наблюдения шансы были пополам. Тогда из ста таких условий активация окажется видна примерно в 45 случаях с процессом и в 15 без него. Вероятность процесса при виде активации получается 45 из 60, то есть 0,75. Байесов фактор равен трём: всё ещё слабое свидетельство. Испортила дело третья величина, те самые три случая из десяти, где процесса не было.
Есть и второй способ увидеть то же самое. Надо посмотреть, как часто область вообще попадается. Проект Neurosynth (Ярконьи, Полдрак, Николс, Ван Эссен и Уэйгер, 2011) автоматически собирает координаты активаций из литературы, и к моменту публикации в базе были данные 3489 статей из семнадцати журналов. Самые частые области: передняя цингулярная кора, передняя островковая доля и дорсолатеральная префронтальная кора. Каждая оказывается активной более чем в двадцати процентах всех исследований подряд, независимо от того, что в них изучали. Область, которая попадается в каждой пятой работе, о содержании конкретной работы не сообщает почти ничего.
Не «при чём активируется эта область», на этот вопрос литература отвечает охотно. А «при чём ещё она активируется». Первый вопрос собирается сам собой из работ, которые изучали интересующий процесс. Второй требует специально измерять то, что никого не интересовало, и именно он определяет, стоит ли обратный вывод хоть чего-нибудь.
Три подмены, из которых складывается ошибка
Разложить ошибку полезно, потому что в тексте её части идут вместе, а чинятся по-разному.
Подмена импликации. Показано «при задаче X область R активнее», а сказано «активность R означает X». Проверяется одним вопросом: измерял ли кто-нибудь, что делает R в задачах, не похожих на X? Если нет, то величина, на которой держится заголовок, попросту не собиралась.
Подмена имени. Область получает бытовое название, «центр вознаграждения», «зона страха», «область эмпатии». И дальше название само делает обратный вывод, молча. Имя придумано по первой группе задач, в которых область заметили. Это сокращение, а не результат. Как только оно попадает в текст, читателю уже нечего выводить: вывод стоит в имени.
Подмена величины. Картинка с цветными пятнами показывает разность между двумя условиями, а не работу мозга, и пятно означает, что различие прошло статистический порог, а не что область «включилась». Устройство методов регистрации разобрано в курсе психологии этой же школы. Здесь важно следствие: то, что перешло порог, есть разность двух условий, и приписывать ей содержание переживания не на чем.
Когда обратный вывод всё-таки допустим
Из сказанного не следует, что обратный вывод запрещён. Полдрак формулирует иначе: такой вывод дедуктивно не обоснован, но может нести информацию, и её количество измеримо. Значит, вопрос не «делать или не делать», а «сколько именно свидетельства это даёт и чем оно подтверждено».
Условие ровно одно, и оно количественное: избирательность области должна быть установлена независимо. Не «мы много раз видели R в задачах на X», а «мы проверили, что R не активна или активна заметно слабее в широком наборе задач без X». Разница между этими проверками огромна. Первая складывается сама собой из работ, которые изучали X, и потому не может ничего опровергнуть. Вторая требует условий, подобранных против собственной гипотезы.
Отсюда три вещи, которые делают обратный вывод пригодным. Во-первых, количественная оценка по своду литературы, а не на глаз: карты обратного вывода Neurosynth строятся именно так и дают величину, а не впечатление. Во-вторых, независимый контраст: избирательность проверяется условиями, подобранными так, чтобы утверждение оспорить. Так устроены работы об области лиц из второго модуля. Там сравнивали не только лица с предметами, но и лица с руками, целые лица с перемешанными. И делали это внутри отдельного испытуемого. В-третьих, вмешательство. Если нарушение работы области меняет поведение в задаче и не меняет его в контрольных задачах, у нас появляется аргумент другого рода. Он не зависит от того, при чём ещё область активна.
И даже при всём этом корректная формулировка остаётся скромной. «Активация R повышает правдоподобие того, что шёл процесс X, примерно во столько-то раз» и есть вывод. «Человек испытывал X» не вывод, а пересказ.
«Область лиц», «языковая сеть», «числовая область» остаются рабочими ярлыками, каждый из которых заслужен конкретными контрастами и ровно в их пределах. Из того, что область названа по X, не следует, что она избирательна к X: следует лишь, что первым её нашли в задачах на X. Избирательность это отдельное утверждение, и у него отдельные данные.
Разбор по шагам
Сведём это в процедуру, которой можно пользоваться на любом тексте про мозг. Четыре вопроса, несколько минут.
Что фактически сравнивали? Найдите контраст: какие два условия вычитались одно из другого. Если в тексте его нет, а есть только «область активировалась», значит, не назван даже прямой вывод, и разбирать нечего до похода в первоисточник.
Насколько избирательна область? Поищите, при чём ещё она активируется. Для передней цингулярной коры, островковой доли и префронтальной коры ответ известен заранее: при очень многом. Для областей вроде зоны лиц или зоны мест ответ надо смотреть, но он существует и опубликован, как раз потому, что его специально измеряли.
Какова исходная доля? Обратный вывод зависит не только от избирательности, но и от того, насколько процесс вообще вероятен в этих условиях. Если из устройства опыта известно, что человек в этот момент решал арифметический пример, вероятность того, что он одновременно испытывал сострадание, мала и до всякой томограммы.
Как звучит утверждение без обратного шага? Перепишите заголовок так, чтобы в нём осталось только измеренное. «Нашли область любви к телефонам» превращается в «при звуке телефона сообщается об активации области, которая активна примерно в трети всех исследований». Второй заголовок никто не напечатает, и это тоже часть объяснения, почему существует первый.
Проверка работает и в обратную сторону, и это её лучшее свойство. Допустим, после четырёх вопросов заголовок устоял: контраст назван, избирательность области подтверждена независимыми данными, доля процесса в этих условиях осмысленна. Тогда перед вами не разоблачённая новость, а редкий случай корректного сообщения о мозге. Курс не учит не верить ничему: он учит отличать одно от другого.
Собрать вывод
Даны результаты исследования. Ваша задача отметить, какие из предложенных выводов из них следуют, а какие нет.
Ключевые работы
| Russell Poldrack, «Can cognitive processes be inferred from neuroimaging data?», Trends in Cognitive Sciences 10(2), 59-63 | 2006 | Байесовский разбор обратного вывода по базе BrainMap: активация зоны Брока поднимает вероятность участия языковой функции с 0,5 до 0,69, что соответствует байесову фактору 2,3, то есть слабому свидетельству. |
| Russell Poldrack, «Inferring mental states from neuroimaging data: from reverse inference to large-scale decoding», Neuron 72(5), 692-697 | 2011 | Уточнение расчёта и сопоставление: для вентрального стриатума и вознаграждения байесов фактор около 9, то есть умеренно сильное свидетельство. Разницу создаёт избирательность области. |
| Tal Yarkoni, Russell Poldrack, Thomas Nichols, David Van Essen, Tor Wager, «Large-scale automated synthesis of human functional neuroimaging data», Nature Methods 8(8), 665-670 | 2011 | Neurosynth: автоматический свод координат активации из 3489 статей семнадцати журналов. Строит и карты прямого вывода, и карты обратного. Самые частые области активны более чем в 20 % всех исследований. |
| Adam Aron и коллеги, «Politics and the Brain», письмо в New York Times | 2007 | Ответ семнадцати нейроучёных на колонку «This Is Your Brain on Politics»: колонка «использует ошибочное рассуждение, чтобы делать необоснованные выводы». Отдельно звучит претензия к публикации нерецензированных данных в прессе. |
Что подтвердилось, а что нет
Нейронаука этого не утверждала, а из активации отдельной области это и не выводится: самые часто сообщаемые области активны более чем в двадцати процентах всех исследований подряд. Работающее исключение устроено иначе: обучаемая классификация выбирает состояние из заранее заданного экспериментатором узкого списка, по картине активности многих вокселей, часто у того же человека и на том же приборе. Полдрак (2011) разбирает такие работы отдельно и подчёркивает, что это не чтение мысли, а выбор из списка, составленного заранее.
Верно, что он дедуктивно не обоснован. Неверно, что он бессодержателен: Полдрак (2006) показывает, что количество даваемого им свидетельства измеримо и зависит от избирательности области. Для зоны Брока и языка байесов фактор около 2,3, слабое свидетельство. Для вентрального стриатума и вознаграждения около 9, умеренно сильное. Отсюда рабочее правило не «никогда», а «назовите величину или не делайте утверждения»: обратный вывод без независимо установленной избирательности не осторожное предположение, а пустое место.
Островковая доля входит в число самых часто сообщаемых областей: по своду Neurosynth она вместе с передней цингулярной и дорсолатеральной префронтальной корой активна более чем в двадцати процентах всех исследований. По доводу письма сорока пяти специалистов она активна примерно в трети работ. Область с такой частотой не различает привязанность, отвращение, боль и внимание. Это не отрицание её участия в переживаниях: отвергается именно обратный переход от активации к содержанию переживания.
Термины
- прямой выводforward inference
- Заключение от задачи к активации: при выполнении задачи X в области R сигнал выше, чем в контрольном условии. Ровно это и измеряет отдельный эксперимент.
- обратный выводreverse inference
- Заключение от активации области к тому, что выполнялся связанный с ней процесс. Дедуктивно не обосновано. Количество даваемого им свидетельства измеримо и определяется избирательностью области.
- избирательность областиregional selectivity
- Степень, в которой область активна при интересующем процессе и не активна при других. Устанавливается условиями, подобранными против гипотезы, а не накоплением работ об интересующем процессе.
- частота активации областиactivation base rate
- Доля всех исследований в литературе, где область сообщается активной, независимо от предмета. Чем она выше, тем меньше информации несёт сообщение об активации.
- априорная вероятность процессаprior probability
- Насколько вероятно участие процесса до того, как получены данные о мозге. Задаётся устройством опыта и содержательным знанием, а не томографом.
- апостериорная вероятностьposterior probability
- Вероятность участия процесса после того, как учтена наблюдённая активация. Считается по формуле Байеса и требует знать, как часто область активна при отсутствии процесса.
- байесов факторBayes factor
- Во сколько раз наблюдение меняет отношение шансов между двумя объяснениями. Значения ниже четырёх принято считать слабым свидетельством.
- карта обратного выводаreverse inference map
- Карта, показывающая для каждой точки мозга, насколько её активация говорит о конкретном процессе с учётом того, как часто она встречается вообще. Строится по своду литературы, а не по одному исследованию.
Практикум · Обратный вывод в живом тексте
Первая половина проходит на тренажёре «Обратный вывод», где даны области с известной частотой активации и предлагается собрать корректное и некорректное заключение. Вторая идёт на живом материале: понадобится свежая новость про мозг и доступ к первоисточнику. 30-45 минут.
- Пройдите тренажёр до конца. Для каждой пары «область и активация» запишите двумя строками, какая величина известна из опыта и какая нужна для заключения. Отметьте, на каком шаге между ними разрыв.
- Найдите новость с формулировкой «нашли область, отвечающую за…» или «мозг таких-то людей реагирует иначе». Выпишите дословно предложение, в котором активация превращается в переживание, свойство или намерение.
- Дойдите до первоисточника и найдите контраст: какие два условия сравнивались. Запишите прямой вывод одной строкой, «при условии A сигнал в таких-то вокселях выше, чем при условии B». Если контраст в статье не описан, это и есть результат разбора.
- Выясните, насколько избирательна названная область: поищите, при каких ещё задачах её сообщают активной. Для передней цингулярной коры, островковой доли и префронтальной коры ответ известен заранее, и его достаточно записать.
- Перепишите заголовок так, чтобы в нём осталось только измеренное, и рядом напишите, какое одно сведение сделало бы исходный заголовок допустимым. Нужен не новый эксперимент, а именно сведение.
Вопросы для самопроверки
В работе показано: при решении задач на конфликт передняя цингулярная кора активнее, чем в контрольном условии. Что из этого следует?
- Что активация передней цингулярной коры означает переживание конфликта
- Что передняя цингулярная кора отвечает за разрешение конфликта
- Что в задачах на конфликт сигнал в этой области выше, чем в контрольном условии, и только это
- Что по активации этой области можно определять, испытывает ли человек конфликт
Две области: первая сообщается активной в 20 % всех опубликованных исследований, а вторая в 2 %. При прочих равных, активация какой из них даёт более сильный обратный вывод?
- Второй: чем реже область активна вне интересующего процесса, тем сильнее сдвигается апостериорная вероятность
- Первой: она участвует в большем числе процессов, значит, о ней известно больше, и вывод от её активации опирается на более широкую базу
- Обеих одинаково: частота активации к силе обратного вывода отношения не имеет
- Первой: по ней накоплено больше данных, и оценка её роли получается точнее
Активация зоны Брока поднимает вероятность того, что человек занят языковой задачей, с 0,5 до 0,69 (Полдрак, 2006). Как это правильно прочесть?
- Расчёт показывает, что зона Брока не связана с языком: будь связь настоящей, вероятность после активации поднялась бы почти до единицы
- Языковые задачи активируют зону Брока примерно в 69 % случаев
- Активация зоны Брока доказывает участие языковой функции в решаемой задаче
- Свидетельство слабое: сдвиг соответствует байесову фактору 2,3, а факторы ниже четырёх считаются слабыми
Авторы пишут: область R избирательна к лицам, поэтому её активация говорит о том, что человек видел лицо. Какая проверка обязана быть в работе, чтобы это утверждение имело основание?
- Увеличение объёма выборки: чем больше участников, тем увереннее переход от активации к заключению о том, что человек видел
- Сравнение отклика на лица с откликом на широкий набор условий без лиц, подобранных так, чтобы избирательность оспорить
- Повторение эксперимента на тех же испытуемых в другой день: устойчивость отклика во времени и есть избирательность области
- Указание точных координат области в стандартном анатомическом пространстве, чтобы её можно было найти у любого другого человека
Колонка сообщает: при звуке телефона у участников активировалась островковая доля, а она же активна, когда люди смотрят на близких. Значит, участники любят свой телефон. В чём главная ошибка?
- В слишком малой выборке: на десятке участников такие выводы не делаются, и сколько-нибудь надёжной оценки из них не выходит ни при каких условиях
- В том, что островковая доля не участвует в переживании привязанности: она занята отвращением и болью, а к близким отношения не имеет
- В том, что данные не опубликованы в рецензируемом журнале и не проверены никем из специалистов, а без рецензии вывод рассматривать незачем
- В том, что из «процесс даёт активацию» выведено «активация означает процесс», тогда как область активна примерно в трети всех работ
Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.
Что читать
- Russell Poldrack, «Can cognitive processes be inferred from neuroimaging data?», Trends in Cognitive Sciences, 2006: Пять страниц, с которых начинается весь разговор. Читать ради того, как формулируется условие пригодности вывода, а не ради вердикта.
- Russell Poldrack, «Inferring mental states from neuroimaging data: from reverse inference to large-scale decoding», Neuron, 2011: Продолжение через пять лет: что даёт свод литературы и чем обучаемая классификация состояний отличается от чтения мыслей.
- Tal Yarkoni и др., «Large-scale automated synthesis of human functional neuroimaging data», Nature Methods, 2011: Описание Neurosynth. Сам свод открыт: полезно один раз посмотреть карту обратного вывода для области, о которой читали в новости.