Работает ли обучение финансовой грамотности
Два свода об одном вопросе, разошедшиеся не знанием об обучении, а числом накопившихся проверок
На вопрос, зачем нужна финансовая грамотность, отвечают измерением, и ответ менялся дважды. Свод 2014 года по 168 публикациям насчитал, что обучение объясняет 0,1 % разброса в поведении людей, а рандомизированных проверок в нём было тринадцать. Свод 2022 года собрал 76 таких проверок в 33 странах и нашёл действие не менее чем втрое больше: умеренное, заметнее всего на бюджете, сбережениях и кредите, слабеющее в первые полгода после занятий.
Fernandes, Lynch, Netemeyer, Management Science, 2014 и Kaiser, Lusardi, Menkhoff, Urban, Journal of Financial Economics, 2022 · 22 мин · обновлено 01.10.2026
После урока вы сможете
- Знать, что известно об эффекте финансового образования и почему два свода разошлись
- Понимать, почему вывод из тринадцати проверок читали восемь лет как окончательный
- Различать «эффекта не нашли» и «эффекта нет»
- Видеть, почему затухание эффекта относится и к этому курсу тоже
Курс о том, как проверять финансовые обещания, начинается с неудобного места. Первым стоит проверить его собственное обещание. Курсы вроде этого обещают, что после них вы будете обращаться с деньгами разумнее, и обещание это можно измерить. Проверить его нетрудно: обещание сформулировано так, что поддаётся измерению, и измерять его брались всерьёз.
Его измеряли, и дважды получили разные ответы. Свод 2014 года подсчитал, что финансовое образование объясняет одну десятую процента разброса в поведении людей, то есть почти ничего. Свод 2022 года нашёл действие втрое больше прежней оценки.
Разошлись они не новым знанием об обучении и не тем, что кто-то ошибся в счёте. Разошлись тем, что в 2014 году проверять было почти нечего: рандомизированных проверок существовало тринадцать. К 2019 году их стало семьдесят шесть. Этот урок разбирает обе работы, и приём, который в нём разбирается, дальше применяется ко всему остальному: к рекламе фондов, к средней доходности, к стратегии, обыгрывавшей рынок десять лет подряд.
Первый свод: почти ничего
В 2014 году в журнале Management Science вышла работа Фернандеса, Линча и Нетемейера. Она собрала 168 публикаций, охвативших 201 исследование. Такой объём сам по себе редкость: обычно свод строится на десятках работ, а не на сотнях. Собрать столько работ по одному вопросу удаётся редко, и уже поэтому свод трудно было отмахнуться как от частного результата.
Результат оказался обескураживающим. Вмешательства, направленные на повышение финансовой грамотности, объясняли 0,1 % разброса в том финансовом поведении, которое изучали. Одну тысячную. Именно это число и разошлось потом по пересказам.
Тут нужна первая из двух оговорок, без которых весь сюжет читается неверно. Работа отвечала на два разных вопроса и отвечала на них порознь. Первый: связаны ли финансовая грамотность и поведение. По наблюдательным работам связь есть, и заметная. Второй: что даёт обучение. Вот здесь и получилась одна тысячная. Противоречия между ними нет: финансово грамотные и правда обращаются с деньгами иначе, а научить этому почти не удавалось.
Авторы прямо назвали и вероятную причину первой связи, и разбирается она в следующем разделе: грамотность приходит к человеку не одна.
И вторая оговорка, важнее первой. Рандомизированных экспериментов в своде было всего тринадцать, и в основном лёгких: брошюра, ярмарка на работе, короткая информационная кампания. В этом наборе из тринадцати работ действие оказалось незначимым. Всё внушительное число участников набиралось из работ другого рода.
Прочие уточнения били по надежде отдельно. В выборках с низким доходом действие оказалось ещё слабее, то есть там, где польза нужнее всего. И самое неприятное: эффект затухает. Даже большие программы со многими часами занятий давали пренебрежимое действие на поведение через двадцать месяцев и позже.
Метаанализ 168 публикаций, 201 исследование. Но на вопрос о действии обучения отвечали из них только тринадцать рандомизированных экспериментов, и в этом наборе действие было незначимым. Различать общий объём свода и число работ, отвечающих на заданный вопрос, придётся весь курс.
Что значит одна тысячная
Число 0,1 % стоит разобрать отдельно, потому что читается оно неверно почти всеми. Оно не означает, что обучение помогло одному человеку из тысячи. И не означает, что знания выросли на одну тысячную.
Оно означает вот что. Люди сильно различаются тем, как обращаются с деньгами: кто-то откладывает, кто-то нет, кто-то влезает в дорогой кредит, кто-то обходится. Эти различия складываются из множества причин: дохода, привычек, воспитания, обстоятельств, характера. Мера показывает, какая доля всего этого разнообразия приходится на обучение.
Одна тысячная значит, что если выстроить людей по тому, насколько разумно они обращаются с деньгами, то знание о том, проходил человек курс или нет, почти ничего не скажет о его месте в этом ряду. Остальные 99,9 % различий объясняются чем-то другим.
И тут же становится видно, почему авторы отдельно отметили корреляционные работы. В них финансово грамотных сравнивали с прочими, и разница выходила заметной. Только грамотность в таких сравнениях приходит не одна: рядом с ней идут бережливость и лёгкость обращения с числами, а они и сами по себе двигают человека по этому ряду. Наблюдение видит сумму, а приписывает её тому единственному, что записано в анкете.
«Объясняет 0,1 % разброса» и «помогло одному из тысячи» звучат похоже и означают совершенно разное. Первое описывает, какая часть различий между людьми связана с причиной. Второе говорит о числе людей. Путать их удобно тем, кто хочет получить из скромного числа громкий заголовок в любую сторону.
Что этот вывод означал
Работу прочитали и услышали. Вывод «финансовое образование не работает» разошёлся широко, попал в популярные пересказы и стал общим местом. У него был вид того редкого случая, когда добросовестное измерение опрокидывает целую индустрию добрых намерений. Спорить с добросовестно посчитанной тысячной долей трудно, и почти никто не спорил.
Тут стоит остановиться и заметить одну вещь, которая пригодится весь курс. Утверждения «эффекта не нашли» и «эффекта нет» различаются, и второе сильнее первого. Свод показал, что в собранных работах действие оказалось крошечным. Это не то же самое, что доказательство невозможности. Первое сообщает о результате поиска, второе о положении дел, и между ними помещается целый свод, собранный по другому правилу.
И вторая вещь, которая объяснит второй акт. Свод отвечает на вопрос ровно теми работами, которые на этот вопрос отвечают, а их было тринадцать. Остальные сто с лишним публикаций отвечали на другой вопрос: связана ли измеренная грамотность с поведением. Восемь лет спустя проверок стало вшестеро больше, и ответ изменился.
Второй свод: втрое больше
В 2022 году в Journal of Financial Economics вышла работа Кайзера, Лусарди, Менкхоффа и Урбана. Она задала тот же вопрос и ответила на него иначе. В науке это обычное дело, и обычно причина не в новых данных, а в том, что́ решили считать данными.
Работ к тому времени накопилось несравнимо больше. В свод брали только рандомизированные эксперименты (те, где участников распределял жребий), и таких набралось 76 вместо прежних тринадцати. Участников свыше 160 000, стран 33 на шести континентах. И это были уже не одни брошюры: среди них были полноценные программы.
Результат: финансовое образование действует и на знания, и на поведение. Величина сопоставима с образовательными вмешательствами в других областях: не чудо, но и не ноль. И она не менее чем втрое больше средневзвешенной оценки по тем тринадцати работам. Устойчиво к поправке на то, что удачные работы публикуются охотнее неудачных.
Заметнее всего действие оказалось на ведение бюджета, сбережения и обращение с кредитом, то есть на вещи, которые человек делает сам и часто, а не на редкие крупные решения. Это осмысленная закономерность, а не случайность выборки: там, где действие повторяется часто и последствия видны сразу, выученному легче удержаться.
Почему они разошлись
Причина не в том, что за восемь лет узнали что-то новое об обучении. Главная причина в том, что в 2014 году отвечать на вопрос было почти нечем. Спор между работами при этом есть, и умалчивать о нём нельзя: авторы 2022 года не сумели воспроизвести подсчёт по тринадцати экспериментам и назвали в нём четыре ошибки в разметке данных.
Первое. «Эффекта не нашли» прочитали как «эффекта нет». В тринадцати работах действие было незначимым, и такое утверждение говорит о результате поиска, а не о положении дел. Восемь лет его цитировали как доказательство бесполезности. Различать эти две формулировки придётся весь курс: почти всякое финансовое утверждение вида «это не работает» на деле означает первое.
Второе. Объём свода обманывает. «168 публикаций и 201 исследование» звучит внушительно, и число это верное. Но на вопрос о действии обучения отвечали из них тринадцать работ, и общее число участников к силе этого вывода отношения не имело. Считать надо не объём свода, а число работ, отвечающих на заданный вопрос.
Третье. Проверяли не то же самое. Тринадцать ранних работ были в основном лёгкими вмешательствами: брошюра, ярмарка, короткая кампания. Семьдесят шесть поздних включали и полноценные программы. Слова «финансовое образование» в двух сводах означали разные вещи, и сравнивать их выводы напрямую нельзя.
Так работает и всё остальное, что вам будут показывать про деньги. Утверждение «наши клиенты в среднем зарабатывают больше» опирается на наблюдение, а клиенты отличаются от неклиентов не только тем, что они клиенты. Урок 3 разбирает, как этот же механизм устроен в рекламе фондов.
Спор о разметке отдельных работ между сводами идёт, но пересчётом их не примирить. Первая работа сообщила, что в имевшихся тринадцати проверках действия не видно. Вторая показала, что в накопившихся семидесяти шести оно есть. Между ними восемь лет, за которые область впервые как следует проверили, и главное расхождение именно здесь.
Чего второй свод не отменил
Тут легко скатиться к удобному выводу: первая работа опровергнута, обучение работает, читаем дальше спокойно. Это было бы неточно, и в курсе, который учит точности, так нельзя.
А вот находка о затухании как раз развернулась. Второй свод разобрал её прямо: из семидесяти шести экспериментов двадцать восемь мерили результат через полгода и позже, а семь через два года и позже. Получилось, что действие слабеет в первые полгода, а дальше не убывает и на двух годах остаётся отличным от нуля. Быстрое затухание 2014 года авторы объясняют тем, что оно посчитано по двадцати девяти наблюдениям с четырьмя поправками сразу.
Слабое действие в выборках с низким доходом тоже не отменено. И само по себе «действие втрое больше почти ничего» остаётся величиной скромной: работа 2022 года честно называет её сопоставимой с образовательными вмешательствами вообще, а они, как известно, гор не двигают.
Точная формулировка на сегодня выглядит так. Финансовое образование действует, действие измеримо и не равно нулю. Оно умеренное. Оно заметнее там, где человек делает что-то сам и часто. И оно слабеет в первые полгода после занятий. Каждое слово здесь добыто измерением, но за последним пунктом измерений пока мало: экспериментов со сроком в два года и больше набирается семь. Долгий срок и есть то место, где вопрос не закрыт.
Из сказанного не следует ни «курсы бесполезны», ни «прошёл курс, стал богаче». Следует, что действие умеренное и затухающее. Курс даёт язык для разбора обещаний, а не готовые ответы. Решение зависит от обстоятельств, которых курс не знает: от вашего срока, дохода и обязательств.
Как этим пользоваться дальше
Из первого урока стоит унести не два числа, а один вопрос. Встретив утверждение «исследования показали», спрашивайте не «сколько исследований всего», а сколько из них отвечают на заданный вопрос. Это разные величины, и расходятся они на порядки.
В своде 2014 года их было тринадцать из ста шестидесяти восьми. Общее число участников (пятьсот восемьдесят пять тысяч) набиралось в основном из работ о другом. Число, которым свод внушает доверие, и число, на котором держится его вывод, оказались разными числами.
Второй вопрос касается того, что именно проверяли. Тринадцать ранних работ были брошюрами и ярмарками, семьдесят шесть поздних включали полноценные программы. Одно и то же название может обозначать вещи разной силы, и тогда выводы двух сводов не сравнимы напрямую.
У этого есть неприятная сторона, о которой честно предупредить лучше сразу. Оба вопроса решаются в разделе о методике, а в пересказ этот раздел не попадает никогда. Курс дальше показывает, где именно смотреть и что там бывает написано.
Что дальше
Мы начали с того, что проверили обещание самого курса, и получили ответ с оговорками вместо лозунга. Дальше так будет постоянно: почти всякое утверждение о деньгах, если его проверить, превращается в утверждение с оговорками. Это не порок предмета, а свойство честного измерения.
Урок 2 выстраивает лестницу доказательств о деньгах (от «у меня получилось» до свода экспериментов) и объясняет, почему ступени весят по-разному. Урок 3 берёт самый распространённый способ обмануться на деньгах: смотреть только на тех, кто дожил до витрины.
А тренажёр этого урока даёт покрутить руками ровно то, о чём шла речь: два свода, собранные по разным правилам отбора. Он берёт те же 168 и 76 работ и позволяет пересобрать свод по своему правилу.
Два свода, два ответа
Вопрос один: меняет ли финансовое образование обращение с деньгами. Два метаанализа отвечают противоположно, и ни один не подделан. Отбор работ на входе решил ответ на выходе. Это курс о самом себе.
Ключевые работы
| Fernandes, Lynch, Netemeyer, Management Science | 2014 | Метаанализ 168 публикаций, охвативших 201 исследование. Включались и наблюдательные работы, и эксперименты. Вмешательства объясняли 0,1 % разброса финансового поведения. Эффект слабее при низком доходе и затухает к двадцатому месяцу. |
| Kaiser, Lusardi, Menkhoff, Urban, Journal of Financial Economics | 2022 | Метаанализ 76 рандомизированных экспериментов, свыше 160 000 участников, 33 страны. Включались только работы с распределением по жребию. Действие на знания и поведение положительное, втрое больше прежней оценки и устойчиво к поправке на смещение публикации. |
Что подтвердилось, а что нет
В сильной форме утверждение держалось на своде 2014 года, куда входили и наблюдательные работы, и эксперименты. Свод 2022 года, собранный только из рандомизированных экспериментов, нашёл действие втрое больше. Оно умеренное, но отличное от нуля и заметнее всего на бюджете, сбережениях и кредите. Осторожная версия выжила: действие невелико и затухает, если к материалу не возвращаться.
Свод 2014 года охватил 168 публикаций и 201 исследование, но на вопрос о действии обучения отвечали из них тринадцать рандомизированных работ, и в этом наборе действие было незначимым. Остальной объём набирался из исследований, отвечавших на другой вопрос. Считать надо не общий объём, а число работ, отвечающих на заданный вопрос: если их мало, внушительное суммарное число участников не добавляет выводу ни грамма.
Первое сообщает о результате поиска, а второе о положении дел. Свод 2014 года честно показал, что в имевшихся тринадцати проверках действия не видно. Восемь лет это цитировали как доказательство бесполезности. Когда проверок стало семьдесят шесть, действие нашлось. Различать эти две формулировки придётся весь курс: почти всякое финансовое утверждение вида «это не работает» на деле означает первое.
Термины
- метаанализmeta-analysis
- Численное объединение результатов многих исследований в одну оценку. Ответ зависит не только от подсчёта, но и от правила, по которому работы отбирались в свод.
- правило включенияinclusion criteria
- Условия, которым должна отвечать работа, чтобы попасть в свод. Объявляется до подсчёта. Разные разумные правила дают разные ответы на один и тот же вопрос.
- рандомизированный экспериментrandomised experiment
- Исследование, в котором участников распределяет по группам жребий, а не их собственный выбор. Так группы становятся сравнимыми и по тому, что никто не измерял.
- наблюдательное исследованиеobservational study
- Сравнение групп, сложившихся самостоятельно: прошедших обучение с непрошедшими, клиентов с неклиентами. Различаются такие группы не только тем признаком, о котором идёт речь.
- смещение публикацииpublication bias
- Перекос свода из-за того, что работы с заметным результатом публикуются охотнее и быстрее прочих. Проверяется отдельными приёмами внутри метаанализа.
- затухание эффектаdecay of treatment effect
- Ослабление действия вмешательства по мере удаления от него во времени. Для обучения свод 2014 года нашёл, что через двадцать месяцев действия почти не остаётся. Свод 2022 года это оспорил: действие слабеет в первые полгода, а дальше держится. Долгих измерений мало, и вопрос открыт.
- доля объяснённого разбросаexplained variance
- Какая часть различий между людьми объясняется изучаемой причиной. Величина 0,1 % означает, что на долю вмешательства приходится одна тысячная различий в поведении.
Практикум · Найти правило отбора
Навык этого урока проверяется на любом сообщении вида «исследования показали». Задача одна: дойти до правила, по которому работы отбирались в свод, и заметить, как редко оно вообще называется. Занимает полчаса и потом работает само.
- Найдите три сообщения о деньгах со словами «исследования показали», «доказано» или «статистика говорит». Берите те, что попались случайно, а не самые сомнительные: выборка должна быть честной.
- Для каждого выпишите, сказано ли, сколько работ вошло в подсчёт и по какому правилу их отбирали. Не результат, а именно правило: только эксперименты или всё подряд, за какой срок, на ком.
- Отметьте, в скольких из трёх правило названо. Скорее всего, правило не названо ни в одном, и это сам по себе ответ о том, что вам сообщили.
- Для одного из трёх дойдите до первоисточника и найдите раздел о методике. Сравните, что там сказано о правиле включения, с тем, что дошло до пересказа.
- Запишите одной фразой, изменился бы вывод, если бы правило было строже. Если ответить не удаётся, значит, из сообщения этого узнать нельзя, и это тоже вывод.
Вопросы для самопроверки
Два метаанализа задали один вопрос о финансовом образовании и получили разные ответы. В чём была главная причина?
- К 2022 году рандомизированных проверок накопилось 76 вместо прежних тринадцати
- Второй свод отказался от наблюдательных работ, которые занижали оценку в первом
- За восемь лет между ними появились принципиально новые данные о том, как люди учатся
- Первый свод измерял знания участников, а второй измерял их реальное поведение с деньгами
В своде 2014 года было 168 публикаций и 201 исследование. Почему этот объём не сделал вывод надёжным?
- Публикации выходили в разных журналах и потому несопоставимы между собой
- Участники распределялись по группам неравномерно, и группы вышли разного размера
- На вопрос о действии обучения отвечали из них лишь тринадцать рандомизированных работ
- Объём был достаточным, а ненадёжной оценку сделала разница в длительности программ
Свод 2014 года нашёл, что действие обучения затухает к двадцатому месяцу. Что сделал с этой находкой свод 2022 года?
- Оспорил её: действие слабеет в первые полгода, а дальше уже не убывает
- Подтвердил её на большем числе работ, и затухание вышло даже быстрее прежнего
- Не касался её вовсе: все вошедшие в него эксперименты мерили результат сразу после занятий
- Отменил её заодно с выводом о слабом действии: обе находки оказались ошибкой разметки данных
Реклама сообщает: «наши клиенты в среднем откладывают вдвое больше». Какого рода это утверждение?
- Экспериментальное: две группы различаются одним признаком, и распределял их жребий, а не собственный выбор людей
- Наблюдательное: клиенты отличаются от неклиентов не только тем, что они клиенты
- Оно ничего не утверждает, пока не названы величина накоплений и срок, за который её считали
- Проверяемо лишь при раскрытии числа клиентов: на малых числах разница ненадёжна
Чем «эффекта не нашли» отличается от «эффекта нет»?
- Ничем: обе формулировки сообщают об отсутствии действия
- Первое говорят при малой выборке, а второе при большой
- Первое сообщает о результате поиска, а второе о положении дел
- Первое относится к наблюдениям, а второе к рандомизированным экспериментам
Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.
Что читать
- OpenStax Principles of Finance, вводная глава: Открытый учебник под лицензией CC BY-NC-SA 4.0, фактическое ядро курса. Вводная глава даёт ту же рамку без формул, а расчёты начинаются дальше.