К содержанию
Фонтум Психология мотивации Урок 21 / 24 Все уроки

Главная · Курсы · Психология мотивации · Программа курса · Модуль VII. Мотивация вокруг нас · урок 21 из 24

Мотивация к спорту: мегаисследования

Мотивацию заниматься спортом проверили на 61 293 посетителях спортзалов: посещения подняли 45 % программ, а после их конца эффект сохранили 8 %

Мегаисследование на 61 293 посетителях спортзалов проверило 54 программы: посещения во время 4 недель подняли 45 % из них, а после конца эффект сохранили 8 %. Прибавка шла на 9-27 % к плацебо-контролю (Милкман и соавторы 2021). Прогнозы профессоров, практиков и непрофессионалов были связаны с результатом на r = 0,02. А средний эффект подталкиваний около d = 0,4 после поправки на публикационное смещение сжался до 0,04 и 0,11 по самым точным оценкам (Майер и соавторы 2022).

Собран по первоисточникам: Милкман и соавторы 2021, Майер и соавторы 2022 · 28 мин · обновлено 22.10.2026

После урока вы сможете

  • Объяснять, что такое мегаисследование и чем оно отличается от метаанализа и многолабораторного повторения
  • Пересказывать мегаисследование спортзалов: на ком, сколько людей, с чем сравнивали, что было исходом и сколько держался эффект
  • Различать процентный пункт и процент на числах аптечного мегаисследования
  • Объяснять, почему оценка лучшего из многих вариантов завышена и почему прогнозы экспертов разошлись с данными
  • Читать числа 0,45, 0,43, 0,04 и 0,11 в споре о среднем эффекте подталкиваний

Три американских фитнес-клуба, три года данных о 7 752 членах. Те, кто выбрал месячный абонемент дороже 70 долларов, ходили в среднем 4,3 раза в месяц. Посещение обходилось им больше чем в 17 долларов, хотя пропуск на 10 посещений давал цену 10 долларов за раз. Так они упускали в среднем 600 долларов экономии. Эти данные разобрали ДеллаВинья и Мальмендир в 2006 году, курс знает работу по аннотации.

Это наблюдение, а не опыт: по абонементам людей никто не распределял. Ведущее объяснение авторов в том, что человек переоценивает свой будущий самоконтроль. Он платит за будущего себя, который будет ходить чаще. Отсюда вопрос урока: что вообще поднимает посещения и знает ли это кто-нибудь заранее?

Самую крупную проверку провели в сети спортзалов 24 Hour Fitness. В ней участвовали 61 293 члена сети, а 30 учёных из 15 университетов придумали для них десятки четырёхнедельных программ. Лучшей оказалась программа, которая давала бонус в 9 центов за возвращение в зал после пропуска. Заранее этого не угадали ни профессора, ни практики, ни случайные люди.

Такой опыт называют мегаисследованием. Это один большой полевой опыт, где много вмешательств от разных команд сравнивают на одной группе людей по одному объективному исходу за один срок. Метаанализ сводит уже сделанные работы. Многолабораторное повторение проводит один протокол в десятках лабораторий, как в уроке 7 этого курса. То, что в поиске называют «мотивация заниматься спортом», здесь проверили на поступках. Простые цифровые программы поднимали посещения, пока шли: так сделали 45 % программ. После их конца значимый эффект сохранили 8 % программ.

Как устроено мегаисследование спортзалов

Мегаисследование спортзалов напечатали в 2021 году Милкман и соавторы, курс читал рукопись полностью, с приложением. В сети больше 4 млн членов и 450 залов в 14 штатах США. Приглашали всех взрослых членов с активным абонементом с 21 марта 2018 года по 31 января 2019 года. В итоговой выборке 61 293 человека, средний возраст в условиях около 38-40 лет, женщин около 65 %.

Насколько выборка похожа на всех членов сети, авторы сказать не могут: согласие на анализ данных давали только сами участники. Программы назывались StepUp и длились 4 недели. За посещения начисляли баллы, которые обменивались на подарочную карту Amazon.

В таблицах статьи 54 условия, но одно из них было плацебо-контролем: участник получал только описание программы и баллы. Такой контроль получает всё, кроме проверяемого приёма, и отделяет приём от самого участия. Исход считали не по анкете, а по отметкам на входе в зал, за год до участия и год после.

До программы участники ходили в среднем 1,27 раза в неделю, в плацебо-контроле во время программы 1,48 раза. За 4 недели 45 % программ значимо увеличили посещения, на 0,14-0,40 посещения в неделю. К плацебо-контролю это прирост на 9-27 %, и ни одна программа посещения не уменьшила. Запись «+0,40 посещения в неделю» и запись «+27 % к плацебо-контролю» говорят об одном и том же сдвиге.

Лучшей стала программа с бонусом в 125 баллов, то есть 9 центов, за возвращение в зал после пропуска. Она дала +0,40 посещения в неделю, или +27 %. Большие баллы за каждое посещение, 490 баллов или 1,75 доллара, дали +25 %. Сообщение, что большинство американцев занимается спортом и доля растёт, дало +24 %. Сами авторы предупреждают, что оценки лучших «are probably inflated», вероятно завышены.

Причина в том, как выбирают лучшего. Среди многих условий с похожим настоящим эффектом первым окажется то, которому вдобавок повезло со случайным шумом. Поэтому оценка победителя почти всегда выше его настоящего эффекта, это называют проклятием победителя. В прививочных опытах ниже авторы посчитали поправку на это завышение, и лучшие оценки там уменьшились.

ловушка«Учёные нашли способ: на 27 % чаще в спортзал»

Так пересказывают мегаисследование 2021 года. Но 27 % это лучшая из десятков программ, и её оценку сами авторы считают вероятно завышенной. Программа действовала 4 недели, а после окончания значимый эффект сохранили 8 % программ. В посещениях это +0,40 раза в неделю при 1,48 в плацебо-контроле.

Что осталось после конца программ: деньги и привычка

После окончания 4 недель значимый и измеримый эффект дали только 8 % программ мегаисследования. Похожее затухание видно и там, где за посещения платили деньгами. Чарнесс и Гнизи в статье 2009 года, которую курс читал полностью, описали два полевых опыта со студентами одного университета. Членство в зале там входит в плату за обучение.

В опыте 1 было 120 студентов, по 40 в группе. Контроль получил листовку о пользе спорта. Группе «восемь раз» платили 25 долларов за одно посещение, а потом ещё 100 долларов за восемь посещений за четыре недели. За 7 недель после окончания группа ходила в среднем 1,24 раза в неделю против 0,60 до опыта, это +107 %. В контроле вышло 0,56 против 0,59.

В опыте 2 у 168 студентов первых двух курсов наблюдение шло 13 недель. Группа «восемь раз» выросла с 0,52 до 1,46 посещения в неделю, это +181 %. Весь прирост дали те, кто раньше ходил реже раза в неделю.

На работниках затухание оказалось быстрее. Статью Ройер, Штер и Сайднор напечатали в 2015 году. Курс читал введение и описание опыта в её рабочей версии 2012 года. Опыт начался в феврале 2009 года на 1 000 сотрудниках крупной компании на Среднем Западе США. Месяц им платили по 10 долларов за посещение, и посещаемость удвоилась. Через месяц после окончания сохранилось 25 % прироста, а ко второму почти всё исчезло.

Половине группы со стимулом затем предложили договор с самим собой. Человек ставил свои деньги на посещения следующих 8 недель, а при провале они уходили на благотворительность. Договор взяли 12 % тех, кому его предложили. Группа, которой его предлагали, за два месяца сохранила половину прироста, и эффект был заметен через год. Это устройство самоограничения, подробно его разбирает урок 6 этого курса.

Каррера и соавторы в работе 2018 года (по аннотации) платили 836 новичкам частного зала за 9 посещений в первые 6 недель. Контроль получал 30 долларов без условий. Прирост в первые недели вышел умеренным, а дальнейшую посещаемость стимулы не изменили. Новички сильно переоценивали, как часто будут ходить. Ту же переоценку нашли Аклэнд и Леви в 2015 году (по аннотации).

Данные той же сети использовали Буяльская и соавторы в работе 2023 года о том, за сколько складывается привычка ходить в зал. Её разбирает урок 10. Связывание соблазна разобрано в уроке 12, а слабый эффект геймификации после конца программ в уроке 20. Сами тренировки урок не разбирает, это тема курса «Наука о тренировках».

Прививки и прогнозы: малый эффект на сотнях тысяч

Ту же схему применили к прививкам. Милкман, Патель, Ганди и соавторы напечатали работу в 2021 году, курс читал её полностью. Осенью 2020 года 47 306 пациентов двух систем здравоохранения на северо-востоке США перед плановым визитом к врачу получили одно из 19 СМС. Контроль получал обычные напоминания о визите. Исходом была прививка от гриппа в день визита или за 3 дня до него.

Все 19 сообщений сдвинули долю привитых вверх, значимо 6 из 19. В среднем прирост составил 2,1 процентного пункта, или 5 %. По расчёту курса доля привитых в контроле около 42 %, в статье она прямо не названа. Лучшим стало двойное напоминание, что прививка уже зарезервирована для пациента: +4,6 пункта. С поправкой на завышение лучшей оценки авторы оценивают его в +2,8.

Второе мегаисследование, работу Милкман, Ганди, Патель и соавторов 2022 года, курс тоже читал полностью. В аптеках Walmart 689 693 человека жребием получили одно из 22 напоминаний или ничего. Исходом была прививка от гриппа в аптеке с 25 сентября по 31 декабря 2020 года. В контроле привились 29,4 %, и все 22 варианта значимо подняли долю. Лучшими стали два сообщения, второе «A flu shot is waiting for you at Walmart», прививка ждёт человека в аптеке. Они дали +2,9 пункта, после поправки Джеймса-Стейна +2,7.

В среднем прирост составил 2,0 процентного пункта, то есть доля выросла с 29,4 % до 31,4 %. Одновременно это рост на 6,8 % от исходной доли. Обе записи верны, но первая говорит, что из 100 человек привились ещё двое, а вторая звучит крупнее.

Близкий результат получили Дай и соавторы в 2021 году (по аннотации). В двух проверках первое напоминание о прививке от COVID-19 подняло долю привитых на 3,57 процентного пункта. Лучше работало сообщение с чувством, что доза принадлежит человеку. Граница переноса тоже известна. Рабб и соавторы в 2022 году не нашли заметного роста от СМС в штате, где прививка давно была доступна всем. Эту работу курс знает только по пересказам.

Мегаисследования проверили и тех, кто такие программы придумывает. Через 14 месяцев после опыта в спортзалах авторы собрали заранее зарегистрированные прогнозы. Их дали 301 человек с платформы Prolific, 156 профессоров общественного здоровья и 90 практиков поведенческой науки. Объединённая связь прогнозов с настоящими эффектами r = 0,02. У профессоров r = −0,07, у практиков −0,18, у людей с Prolific 0,25, и всё это незначимо. В среднем прогнозы были в 9,1 раза оптимистичнее того, что вышло.

В аптечном мегаисследовании 24 учёных, придумавших сообщения, не угадали порядок вариантов, r = 0,03. Непрофессионалы с Prolific угадали лучше, r = 0,60, хотя различие двух корреляций на грани значимости. Лучшее сообщение учёные поставили на 15-е место из 22. Эти прогнозы собрали и опубликовали сами авторы мегаисследований. Похожую ошибку экспертов в опыте ДеллаВинья и Поуп 2018 года разбирает курс «Экономика», урок 22.

Это показывает тренажёр урока. На первом экране двигают число людей, получивших сообщение, от 1 000 до 1 000 000. При +2,0 процентного пункта на миллион сообщений выходит около 20 тысяч дополнительных прививок, это расчёт курса. Подпись напоминает, что для одного человека шанс меняется на 2 из 100. На втором экране 54 варианта с одинаковым настоящим эффектом на учебных числах. «Победитель» каждый раз другой, и его оценка выше настоящей. Рядом стоят настоящие пары 4,6 и 2,8, 2,9 и 2,7 пункта. Третий экран показывает доли сработавших программ во время и после, 45 и 8 %, и точки прогнозов. Угадывать лучшее сообщение тренажёр не предлагает.

чего исследование не показалоЧего исследование не показало

Мерили посещения по отметкам на входе у 61 293 членов одной сети спортзалов США за 4 недели программ и долю привитых в больших группах пациентов. Это средние по группам. Прирост на 2 процентных пункта значит, что шанс одного человека меняется на 2 из 100, а не что каждый станет прививаться чаще. Придёт ли в зал конкретный человек от бонуса или сообщения, отсюда не следует, потому что эффект у разных людей разный, а мерили только среднее.

Средний эффект подталкиваний: 0,45, 0,43 и почти ноль

СМС о прививке и сообщение о том, что большинство занимается спортом, это подталкивания. Так называют изменение архитектуры выбора, которое не запрещает ни одного варианта и не меняет денежных условий. Их средний эффект оценил метаанализ, который в 2022 году напечатали Мертенс, Херберц, Ханель и Брош. Курс читал его аннотацию и полный текст поправки. В своде больше 200 исследований и около 2,15 млн человек, в исходной аннотации стояло d = 0,45.

В мае 2022 года авторы опубликовали поправку. В выборку попали четыре результата из отозванной статьи Шу и соавторов 2012 года, ошибочные значения из другой статьи и ошибки кодирования. После исправления осталось 447 эффектов и d = 0,43, и это исправление данных, а не поправка на публикационное смещение. Само смещение авторы тоже нашли: при умеренном смещении эффект падает до 0,31, при сильном до 0,08.

Поправку на смещение к тем же данным сделали Майер и соавторы, их письмо 2022 года курс читал полностью. Их метод, робастный байесовский метаанализ, усредняет модели со смещением и без него. Он дал d = 0,04 (от 0,00 до 0,14) и фактор Байеса BF01 = 0,95. Это значит, что данных не хватает ни за эффект, ни против. По самым точным оценкам из каждого исследования вышло 0,11 (от 0,00 до 0,24), это слабые данные в пользу эффекта. Разброс большой, и отдельные подталкивания могут работать даже при нулевом среднем.

Сасси и соавторы в письме того же года применили три других метода поправки. Они получили от −0,01 до 0,08, а исключением назвали умолчания. Это письмо курс тоже читал полностью. Мертенс и соавторы в ответе смещение признали и назвали свою работу обзором, а не последним словом. Курс «Психология», урок 22, пишет, что после поправки эффект неотличим от нуля: для 0,04 это верно, а 0,11 добавляет вторую сторону.

ДеллаВинья и Линос в 2022 году (по аннотации) взяли все 126 испытаний двух подразделений подталкивания. Так называют группы при органах власти США, которые проверяют вмешательства жребием. На 23 млн человек вышло +1,4 процентного пункта против +8,7 в академических журналах. Эффект подразделений «highly statistically significant», статистически высоко значим. Около 70 % разницы объясняет избирательная публикация при малой мощности. Подробно об этом курс «Экономика», урок 22, и «Основы статистики», урок 20. Мегаисследование и сплошная выборка подразделений решают одну задачу: публикуют все результаты, а не только удачные.

Что выдержало проверку

Выдержало то, что простые программы поднимают посещения спортзала, пока идут. Так сделали 45 % программ на 61 293 людях и денежные стимулы в опытах со студентами и работниками. Сообщение, что прививка уже ждёт, подняло долю привитых на 2,7-2,8 процентного пункта после поправки. Подталкивания в сплошных выборках дают малый, но значимый эффект. Эти эффекты опубликованы целиком, но малы и держатся в основном, пока идёт программа.

Не выдержали четыре пересказа. Эксперты не знают заранее, что сработает, а деньги за спортзал не оставляют привычку надолго. Средний эффект подталкиваний не d около 0,4, но и мысль, что они совсем не работают, отвергнута. Ошибки нашли сами исследователи. Авторы мегаисследований предупредили о проклятии победителя, собрали прогнозы и сообщили о 8 % программ с эффектом после конца. Майер и соавторы, Сасси и соавторы и сами Мертенс и соавторы проверили средний эффект, ДеллаВинья и Линос сравнили журналы с подразделениями. Ройер, Штер и Сайднор и Каррера и соавторы показали затухание после стимула.

Числа урока описывают конкретные группы. Это члены одной сети спортзалов США, пациенты двух систем здравоохранения и аптек одной сети, студенты одного университета, сотрудники одной компании и новички одного зала. Исходом везде были поступки, а не ответы о мотивации. Но сколько будет ходить в зал один человек, средние не говорят. На ком мерили, сколько было людей, как долго за ними следили и что считали исходом: ответы в анкете или поступки?

тренажёр урока 21

Малый эффект на миллионах

Учебные только варианты второго экрана. Настоящие: 2 процентных пункта аптечного мегаисследования на миллионе сообщений, завышенный победитель и прогнозы экспертов.

Открыть тренажёр

Ключевые исследования

Милкман и соавторы2021Мегаисследование, полевой опыт, полный текст рукописи с приложением. 61 293 члена сети спортзалов США, 54 условия, из них одно плацебо-контроль, программы по 4 недели, исход посещения по отметкам на входе. Во время программ значимо подняли посещения 45 % программ, на 9-27 %, лучшая +27 %, после окончания значимый эффект у 8 %, прогнозы экспертов r = 0,02.
Милкман, Патель, Ганди и соавторы2021Мегаисследование, полевой опыт, полный текст. 47 306 пациентов двух систем здравоохранения США, осень 2020 года, 19 вариантов СМС против обычных напоминаний о визите. В среднем +2,1 процентного пункта к доле привитых от гриппа, лучшее +4,6, после поправки на завышение +2,8.
Милкман, Ганди, Патель и соавторы2022Мегаисследование, полевой опыт, полный текст. 689 693 пациента аптек Walmart, 22 варианта СМС против отсутствия сообщений, в контроле привились 29,4 %. Все 22 варианта значимо подняли долю, в среднем +2,0 процентного пункта (+6,8 %), прогнозы учёных r = 0,03.
Чарнесс и Гнизи2009Два полевых опыта, полный текст. 120 и 168 студентов одного университета, деньги за посещения зала, наблюдение 7 и 13 недель после окончания. В группе «восемь раз» +107 % и +181 % посещений, весь прирост у тех, кто раньше ходил реже раза в неделю.
Ройер, Штер и Сайднор2015Полевой опыт, полный текст рабочей версии NBER 2012 года. 1 000 сотрудников одной компании США, месяц по 10 долларов за посещение. Через месяц после стимула осталось 25 % прироста, ко второму почти ничего, договор с самим собой взяли 12 % тех, кому его предложили.
Каррера и соавторы2018Полевой опыт, по аннотации. 836 новых членов частного зала, плата за 9 посещений в первые 6 недель против 30 долларов без условий. Умеренный прирост в первые 6 недель, дальнейшую посещаемость стимулы не изменили.
Мертенс и соавторы2022Метаанализ, аннотация и полный текст поправки. Больше 200 исследований, около 2,15 млн человек. В исходной аннотации d = 0,45, после исправления ошибок данных 0,43, в анализе чувствительности авторов 0,31 при умеренном и 0,08 при сильном публикационном смещении.
Майер и соавторы2022Переанализ данных метаанализа робастным байесовским методом, полный текст письма, своей выборки нет. После поправки на публикационное смещение d = 0,04 (BF01 = 0,95), по самым точным оценкам 0,11, слабые данные в пользу эффекта.

Что подтвердилось, а что нет

выдержалоПростые цифровые программы могут увеличить посещение спортзала, пока они идут

Во время 4 недель 45 % программ мегаисследования на 61 293 людях значимо подняли посещения, на 9-27 % к плацебо-контролю (Милкман и соавторы 2021). Денежные стимулы тоже повышали посещаемость на время действия и в опытах Чарнесс и Гнизи 2009 года, и в опыте Ройер, Штер и Сайднор 2015 года. Это эффект на время программы, а не после неё.

сильно ослабленоЕсли заплатить человеку за походы в спортзал, привычка останется

У студентов прирост сохранялся 7 и 13 недель наблюдения (Чарнесс и Гнизи 2009). У сотрудников компании через месяц осталось 25 % прироста, через два почти ничего (Ройер, Штер и Сайднор 2015). У новичков зала стимулы не изменили дальнейшую посещаемость (Каррера и соавторы 2018, по аннотации). В мегаисследовании после окончания значимый эффект дали 8 % программ.

отвергнутоЭксперты знают, какие приёмы работают

Для этих полевых опытов: прогнозы профессоров, практиков и людей с Prolific связаны с результатом мегаисследования спортзалов на r = 0,02 и в 9,1 раза оптимистичнее. В аптечном мегаисследовании авторы сообщений не угадали порядок вариантов (r = 0,03), непрофессионалы угадали лучше (0,60). Лучшее вмешательство не угадал никто.

сильно ослабленоПодталкивания в среднем дают эффект около d = 0,4

0,43 это исправленное число самой статьи Мертенс и соавторов, из неё исключены в том числе результаты отозванной статьи. После поправки на публикационное смещение 0,04 и 0,11 по самым точным оценкам (Майер и соавторы 2022), от −0,01 до 0,08 (Сасси и соавторы 2022), у самих авторов 0,31 и 0,08. В сплошной выборке подразделений 1,4 процентного пункта против 8,7 в журналах (ДеллаВинья и Линос 2022), тот же статус стоит в курсе «Экономика», урок 22. Обратное утверждение «подталкивания совсем не работают» отвергнуто: 126 испытаний подразделений дают значимый эффект, все 22 СМС в аптеках подняли долю привитых.

Термины

мегаисследованиеmegastudy
Один большой полевой опыт, где много вмешательств от разных команд сравнивают на одной группе людей по одному объективному исходу за один срок.
плацебо-контрольplacebo control
Условие, которое получает всё, кроме проверяемого приёма, чтобы отделить приём от самого участия.
проклятие победителяwinner's curse
Завышение оценок, прошедших отбор: при малой мощности порога значимости достигают лишь те выборки, где разница вышла случайно крупной, поэтому опубликованная величина систематически выше истинной.
процентный пунктpercentage point
Разница двух долей. С 29,4 % до 31,4 % это +2,0 процентного пункта и одновременно рост на 6,8 %.
подталкиваниеnudge
Изменение архитектуры выбора, не запрещающее ни одного варианта и не меняющее денежных условий.
публикационное смещениеpublication bias
Работы со значимым результатом печатают охотнее, поэтому средний эффект по опубликованному завышен.
робастный байесовский метаанализrobust Bayesian meta-analysis, RoBMA
Метод, который сразу усредняет модели с публикационным смещением и без него и показывает, насколько данные говорят за эффект или против.
неоднородность эффектаheterogeneity
Эффект разный у разных людей или в разных выборках, и среднее его не описывает.
устройство самоограниченияcommitment device
Добровольное ограничение собственного будущего выбора: замок на счёте, залог, который пропадёт при срыве, удалённое приложение.
отсроченный замерfollow-up
Повторное измерение через месяцы после конца программы. Только он отвечает на вопрос «надолго ли».

Практикум · Разбор новости «Учёные нашли способ заставить людей ходить в спортзал на 27 % чаще»

Новости с таким заголовком пересказывают мегаисследование 2021 года. Задание в том, чтобы взять одну такую новость и разобрать её по вопросам урока. Понадобится сам текст новости и, если получится, открытая рукопись статьи из списка чтения.

  1. Найдите, лучший ли это вариант из многих и сказано ли, что оценку лучшего авторы считают вероятно завышенной.
  2. Найдите, сколько длилась программа и что осталось после её конца. Сравните с данными урока: 4 недели программ и 8 % программ со значимым эффектом после окончания.
  3. Найдите контроль: с чем сравнивали. Отметьте, назван ли плацебо-контроль, обычные напоминания или отсутствие сообщений.
  4. Переведите проценты в абсолютные числа: «+27 %» это +0,40 посещения в неделю при 1,48 в плацебо-контроле. Проверьте, не стоят ли в новости проценты там, где речь о процентных пунктах.
  5. Отделите вывод о группе от вывода об одном человеке. Выпишите, что средний прирост на десятках тысяч людей говорит о сети спортзалов и чего он не говорит о читателе новости.

Вопросы для самопроверки

Вопрос 1

Что значит «+27 %» у лучшей программы мегаисследования спортзалов?

  • Учёные нашли способ поднять посещения на 27 % надолго, если программа длится хотя бы месяц
  • 27 % участников начали ходить в зал регулярно, остальные ходили как раньше
  • Средний прирост всех программ, хотя у отдельных он был меньше
  • Около +0,40 посещения в неделю к плацебо-контролю за 4 недели, и авторы считают это вероятно завышенным
Вопрос 2

Что осталось от денежных стимулов за спортзал после их окончания?

  • Привычка закрепилась у всех, кому платили, если стимул шёл не меньше месяца
  • Быстрое затухание у работников и новичков
  • Ничего не было и во время стимула, деньги не мотивируют ходить в зал
  • Прирост сохранился на годы у всех, кому платили больше 100 долларов
Вопрос 3

Как прогнозы экспертов связаны с результатами мегаисследования спортзалов?

  • Профессора угадали порядок программ, практики ошиблись
  • Эксперты по поведенческой экономике знали, что сработает
  • Почти никак: объединённая r = 0,02, и прогнозы в 9,1 раза оптимистичнее
  • Лучше всех угадали практики, хотя их было всего 90 и разброс прогнозов велик
Вопрос 4

В аптечном мегаисследовании доля привитых в среднем выросла с 29,4 до 31,4 %. Как это записать?

  • +2,0 % и одновременно +6,8 процентного пункта от исходной доли
  • +6,8 процентного пункта, потому что считают от исходной доли
  • +2,0 % и +2,0 процентного пункта, это одно и то же
  • +2,0 процентного пункта и одновременно +6,8 %
Вопрос 5

Что стало с числом d = 0,45 из метаанализа подталкиваний?

  • Метаанализ доказал d = 0,45, а поправка на смещение лишь уточнила его до 0,43
  • После исправления ошибок данных 0,43, после поправки на смещение 0,04 и 0,11 по самым точным оценкам
  • После поправки эффект ровно ноль, значит, подталкивания совсем не работают
  • 0,43 это и есть поправка на публикационное смещение, так что средний эффект около 0,4 надёжен

Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.

Что читать

  • Milkman et al. (2021). Megastudies improve the impact of applied behavioural science. Nature 600, 478-483. https://pmc.ncbi.nlm.nih.gov/articles/PMC8822539/: Открытая рукопись статьи. Читать рисунок 1 со всеми 54 условиями и раздел «Prediction accuracy» о прогнозах. Курс читал полный текст вместе с приложением.
  • Milkman, Gandhi, Patel et al. (2022). A 680,000-person megastudy of nudges to encourage vaccination in pharmacies. PNAS 119(6), e2115126119. https://pmc.ncbi.nlm.nih.gov/articles/PMC8833156/: Открытая статья. Читать таблицу 1 и раздел о прогнозах. В названии у авторов округлённое число, в самой статье и в уроке 689 693 человека. Курс читал полный текст.
  • Maier, Bartoš, Stanley, Shanks, Harris, Wagenmakers (2022). No evidence for nudging after adjusting for publication bias. PNAS 119(31), e2200300119. https://pmc.ncbi.nlm.nih.gov/articles/PMC9351501/: Открытое письмо. Читать таблицу оценок до и после поправки: 0,43, 0,04 и 0,11. Курс читал письмо полностью.
  • Mertens, Herberz, Hahnel, Brosch (2022). The effectiveness of nudging: A meta-analysis of choice architecture interventions across behavioral domains. PNAS 119(1), e2107346118, correction e2204059119. https://pmc.ncbi.nlm.nih.gov/articles/PMC9171817/: Открытая страница поправки мая 2022 года. Читать, что исправлено, и новую таблицу 2 с d = 0,43. Курс читал поправку целиком, а исходную статью по аннотации.
  • Charness, Gneezy (2009). Incentives to exercise. Econometrica 77(3), 909-931. https://rady.ucsd.edu/_files/faculty-research/uri-gneezy/incentives-exercise.pdf: Открытая статья на сайте Калифорнийского университета в Сан-Диего. Читать рисунок 1 с посещаемостью по неделям до, во время и после стимула. Курс читал полный текст.
Все курсы и разделы школы
Фонтум

Открытая школа: университетские программы и практикумы на русском. Целиком, бесплатно, без регистрации.

Курс «Психология мотивации»

ВАШ СЛЕДУЮЩИЙ ВОПРОС

Что хотите понять?