Тест на критическое мышление
Как устроен экзамен и как добрать слабые навыки
Карта курса даёт итоговый обзор: тридцать заданий по тридцати навыкам, от разбора аргументов и приёмов спора до искажений, чисел, проверки источников и собственных решений. Формат знакомый по самопроверкам, где четыре варианта, один верный, а разбор открывается сразу. Ни таймера, ни даты, результат от 24 из 30 отмечается как пройденный курс. Готовиться полезнее решением, чем перечитыванием, ведь беглость текста создаёт иллюзию знания.
Модуль VIII. Решения и экзамен · навыки А3, Б6, В5, Г6, Д3, Е2, Ж1 · 19 мин · обновлено 12.09.2026
Тест на критическое мышление в этом курсе устроен как итоговый экзамен: 30 заданий, по одному на каждый навык, с разбором каждого ответа и итогом в конце.
После урока вы сможете
- Устройство экзамена и подготовка к нему: решать вместо перечитывания с поправкой на срок, собирать артефакты и различать беглость и знание.
Эта лекция короче остальных: перед экзаменом полезнее решать, чем читать. Здесь разбираем, как всё устроено, как готовиться и что будет после.
Зачем экзамен добровольному курсу
Ты пришёл сюда сам, и никто не просил тебя ничего сдавать. Зачем тогда экзамен? Две причины.
Измерение. Тридцать заданий по тридцати навыкам курса показывают не общее ощущение «вроде поумнел», а какие именно операции ты выполняешь, а какие нет. Единицей прогресса здесь служит навык, и в конце его можно предъявить самому себе.
Фиксация. Сданное помнится иначе, чем просмотренное. Экзамен это гвоздь, на который вешается всё, что ты собрал за восемь модулей.
Есть и третья причина, о которой стоит сказать прямо. Экзамен это последняя возможность курса соврать вам в лицо и быть пойманным. Если после восьми модулей задания решаются наугад, значит, курс научил меньше, чем обещал, и вы об этом узнаете. Мы предпочитаем такой исход приятному ощущению, что всё прошло хорошо.
Устройство экзамена
Тридцать заданий, по одному на каждый навык курса. Формат знакомый по самопроверкам: четыре варианта, один верный, разбор открывается сразу после ответа. Среди заданий есть ловушки, включая те, где верный ответ «ошибки нет»: правило меры действует и на экзамене, резкое ещё не значит сломанное.
Ни таймера, ни даты. Экзамен открыт всегда, попыток столько, сколько нужно. Результат от 24 из 30 отмечается как пройденный курс, но полезнее итоговой цифры список заданий, на которых ты ошибся: он и есть карта того, что стоит добрать.
Перед итоговым стоят три блочных экзамена по двадцать вопросов, выбранных случайно из самопроверок уроков 1-9, 10-18 и 19-24. Они не накопительные: при повторном заходе набор будет другим.
Отдельно от тестов идут три письменные работы: разбор новости с числами, фактчек вирусного утверждения и финальный разбор большого текста. Проверять их будешь ты сам, и в этом главная трудность: критерии к каждой выписаны отдельно, честная сверка с ними и есть половина задания.
Как готовиться: три правила
1. Решай, а не перечитывай. Это главный совет, и он верен с одной важной оговоркой, которую обычно проглатывают. Поэтому разберём его отдельно и с числами, а пока просто правило: главным инструментом подготовки служат задания. Прогони заново самопроверки уроков, где в прошлый раз ошибался, и блочные экзамены. Перечитывать все лекции подряд значит выбрать самый уютный и самый бесполезный способ готовиться.
2. Конспекты и артефакты. Перечитай конспекты лекций (они и писались как твой предэкзаменационный комплект) и собери в одном месте все восемь артефактов, от «трёх вопросов» до чек-листа решений. Собрать их своей рукой уже само по себе повторение.
3. Выспись. Экзамен идёт без даты, так что день ты выбираешь сам. Уставший мозг хуже решает, этому был посвящён, в общем, весь курс. Выбери день, когда ты выспался. Зубрёжка в ночь станет сделкой с худшим курсом обмена.
Про честность скажем один раз и прямо. Экзамен проходит без поиска и подсказок: его смысл в том, чтобы измерить тебя, а списанный балл означает соврать себе о собственном приросте. Единственный человек, которому здесь можно навредить обманом, это ты сам. И помни: попыток столько, сколько нужно, и первая неудачная не позор, а тоже измерение.
Не открывая конспектов: назови три вопроса модуля 1 к любому тексту, который тебя в чём-то убеждает?Показать ответ
«Меня в чём-то убеждают?» · «Каков тезис и на каких посылках он стоит?» · «Что должно быть правдой, чтобы это работало?» Вспомнил все три без подглядывания, значит только что сработал тот самый эффект вспоминания из первого правила подготовки.
Что показали опыты про «решай, а не перечитывай»
Совет опирается на конкретную работу, и её стоит знать в деталях. Особенно потому, что в популярных пересказах из неё выпадает половина.
Рёдигер и Карпике (2006) давали студентам тексты из пособия для подготовки к языковому экзамену. Одна группа перечитывала, другая проверяла себя по памяти. Дальше шла проверка знаний, и вот тут начинается интересное.
Через пять минут выигрывало перечитывание: 81 % против 75 % в первом опыте. Не проиграло, не сравнялось, а выиграло.
Через два дня картина переворачивалась: 68 % у самопроверки против 54 % у перечитывания. Через неделю разрыв сохранялся: 56 % против 42 %.
Отсюда точная формулировка, которой курс раньше не давал: вспоминание закрепляет сильнее перечитывания на отсрочке, а на немедленной проверке перечитывание выигрывает. Разница практическая. Если экзамен через час, зубрёжка не так уж глупа. Если же через неделю, то она худшее из возможного.
И третья деталь оттуда же, самая неприятная. Перечитывавшие были увереннее в своём результате и при этом помнили меньше. Беглость чтения ощущается как знание, потому этот способ и держится: он приятнее и обманывает ровно в ту сторону, в которую хочется обмануться.
Где приём перестаёт работать
Метаанализ Роуленда (2014) свёл 61 исследование и 159 размеров эффекта за 1975-2013 годы. Сводная оценка преимущества самопроверки над перечитыванием равна g = 0,50, то есть эффект среднего размера. И там же стоят три оговорки, каждая из которых меняет практику.
Порог начального припоминания. Если на первой проверке ученик вспомнил меньше половины материала, эффект падает до неотличимого от нуля. Проще говоря: проверять себя по тексту, который вы ещё не понимаете, бессмысленно. Сначала разобраться, потом гонять.
Публикационное смещение. В опубликованных работах эффект g = 0,58, а в неопубликованных 0,25. Разница больше чем вдвое, и это обычная картина: исследования с крупным эффектом печатают охотнее. Реальная величина, скорее всего, ближе к нижней оценке.
Сложность материала. Ван Гог и Свеллер (2015) в обзоре утверждают, что эффект убывает и может исчезать по мере роста сложности. Карпике и Ауэ возражают: мера сложности количественно не определена, а обзор пропустил работы со сложным материалом, где эффект наблюдался. Спор не закрыт.
Что из этого следует для твоей подготовки? Ровно то же, но с настройками. Решать задания полезнее, чем перечитывать, если материал уже понят и до проверки не пять минут. А ощущение «я это знаю», возникшее при чтении конспекта, к готовности отношения не имеет: его даёт беглость, а не память.
Честно, по памяти: назови два своих слабейших навыка и что сделаешь с ними сегодня.Показать ответ
правильного ответа нет, есть твой. Первыми без нагрузки обычно сдуваются навыки-«мышцы», то есть формальные ошибки (Б1), базовая частота (Д1), регрессия к среднему (Г6): они держатся на процедуре, а не на впечатлении. Если твои слабейшие взяты из этого списка, это ожидаемо: их и добирают заданиями, а не перечитыванием.
После экзамена
Через месяц вернись и устрой себе пятиминутку на пять любых заданий из самопроверок: проверить, что осталось без подпитки, и подкрутить то, что просело. Навыки без практики тают, и мы проектировали курс с этим знанием, а не вопреки ему.
Дальше идёт курс психологии этой же серии: там разбирается, откуда берутся искажения из модуля 3 и что с ними стало после кризиса воспроизводимости. И одна просьба: когда курс сработает у тебя в жизни, когда поймаешь манипуляцию в переговорах, пересчитаешь «выгодный» процент, премортем спасёт от найма не того человека, напиши нам об этом одно письмо. Такие письма и есть лучший материал для того, чтобы курс становился сильнее.
Пятиминутка устроена так не случайно. Пять заданий через месяц это и есть отсроченная проверка из правил подготовки, только применённая к самому курсу. Заодно она честно покажет, что просело: обычно первыми сдуваются процедурные навыки, то есть счёт базовой частоты, разметка факта и оценки, поиск второго объяснения. Впечатления держатся дольше процедур, и это ровно та ловушка, о которой курс говорил с первого модуля.
Кода
Вспомни первый урок. Переписка про подъём в пять утра, «бред», потом «сам ты бред», и ощущение, что спорить тут не с чем. Сейчас ты видишь устройство таких реплик насквозь, и не потому, что запомнил список ошибок, а потому что у тебя появились инструменты. Это и есть прирост, и на экзамене он станет цифрой.
Напоследок скажем о том, чем этот курс НЕ был. Мы не учились подозревать всех и не готовили тебя к карьере человека, который на семейном ужине кричит «это ложная дилемма!» (помни о мере, ведь то самое правило из модуля 2 распространяется и на жизнь). Критическое мышление это не спорт «поймай всех», это забота: о своих решениях, своих деньгах, своём времени и о людях, которые от твоих решений зависят.
Мы не учились спорить. Мы учились видеть устройство того, что говорят нам, и того, что мы говорим себе. Дальше начинается практика без рубрик: жизнь проверяет без вариантов ответа, зато и материал в ней не кончается.
Три вопроса остаются с тобой. Помни о мере. И веди счёт.
До встречи на экзамене.
Конспект
Экзамен добровольному курсу нужен для измерения (какие операции получаются, а какие нет) и фиксации (сданное помнится иначе, чем просмотренное). Устройство такое. Тридцать заданий, по одному на каждый навык. Четыре варианта, один верный, разбор сразу после ответа. Среди заданий есть ловушки, где верный ответ «ошибки нет». Ни таймера, ни даты, попыток сколько нужно. От 24 из 30 курс считается пройденным, но полезнее цифры оказывается список собственных ошибок. Перед итоговым идут три блочных экзамена по двадцать вопросов из самопроверок уроков 1-9, 10-18 и 19-24, набор каждый раз новый. Отдельно стоят три письменные работы, которые проверяешь сам по выписанным критериям. Подготовка: решай, а не перечитывай, но с оговоркой. На отсрочке самопроверка выигрывает: 68 % против 54 % через два дня и 56 % против 42 % через неделю. А на немедленной проверке выигрывает перечитывание: 81 % против 75 % через пять минут. Перечитывавшие при этом увереннее в себе. Границы: если на первой проверке вспомнилось меньше половины, эффект падает до нуля. В опубликованных работах он вдвое больше, чем в неопубликованных. Про сложный материал спор открыт. Ещё в подготовку входят конспекты и сбор восьми артефактов, и надо выспаться (день выбираешь сам). Честность: без подсказок, ведь списанный балл лжёт тебе о тебе. Неудачная попытка не позор. После: пятиминутка через месяц, курс психологии, письмо о победе. Кода: не спорт «поймай всех», а забота о своих решениях, три вопроса · мера · счёт.
Ключевые работы
| Roediger & Karpicke | 2006 | 120 и 180 студентов на текстах из пособия TOEFL: через пять минут перечитывание выигрывало (81 % против 75 %), но через два дня и через неделю выигрывала самопроверка (68 % против 54 % и 56 % против 42 %). При этом перечитывавшие были увереннее в своём результате. |
| Rowland | 2014 | Метаанализ 61 исследования и 159 размеров эффекта за 1975-2013 годы: сводный эффект самопроверки против перечитывания g = 0,50, но он падает до неотличимого от нуля, если на начальной проверке вспоминается меньше половины материала, и вдвое меньше в неопубликованных работах (0,25 против 0,58). |
| van Gog & Sweller | 2015 | Обзор: эффект самопроверки убывает и может исчезать по мере роста сложности материала. В ответ Karpicke и Aue возражают, что мера сложности не определена количественно и что обзор пропустил работы со сложным материалом, где эффект наблюдался. |
Разбор
Верно только на отсрочке. У Рёдигера и Карпике (2006) на проверке через пять минут перечитывание выигрывало: 81 % против 75 %. Преимущество самопроверки появлялось через два дня (68 % против 54 %) и держалось через неделю (56 % против 42 %). По метаанализу Роуленда (2014) сводный эффект g = 0,50, но он падает до неотличимого от нуля, если на первой проверке вспоминается меньше половины материала, и вдвое меньше в неопубликованных работах, чем в опубликованных. Точная формулировка: сильнее работает на отсрочке, при уже понятом материале и с поправкой на публикационное смещение.
Ван Гог и Свеллер (2015) в обзоре утверждают, что эффект убывает и может исчезать по мере роста сложности материала. Карпике и Ауэ отвечают, что мера сложности количественно не определена и что обзор не учёл работы со сложным материалом, где эффект наблюдался. Обе стороны опираются на данные, вопрос не закрыт. Практический вывод осторожный: на связном и трудном материале рассчитывать на тот же выигрыш, что на списках слов, оснований пока нет.
Ощущение даёт беглость чтения, а не память. В опытах Рёдигера и Карпике перечитывавшие были увереннее в своём результате и одновременно помнили меньше, то есть уверенность указывала в противоположную сторону. Отсюда и рабочее правило подготовки: единственная честная проверка готовности состоит в попытке воспроизвести материал, закрыв текст. Всё остальное измеряет, насколько привычно выглядят строчки.
Рёдигер и Карпике (120 и 180 студентов, тексты пособия TOEFL): через два дня 68 % против 54 %, через неделю 56 % против 42 %. Метаанализ Роуленда, 61 исследование и 159 размеров эффекта за 1975-2013 годы, даёт сводный эффект g = 0,50. Граница у результата отчётливая, и половина её стоит рядом отдельными позициями: на проверке через пять минут выигрывает перечитывание (81 % против 75 %), а у Роуленда эффект падает до неотличимого от нуля, если на начальной проверке вспоминается меньше половины материала. Устояло преимущество на отсрочке, а не правило «вспоминать всегда полезнее, чем читать».
Термины
- Эффект самопроверкиtesting effect
- Более прочное запоминание после попытки вспомнить материал по сравнению с повторным чтением. Проявляется на отсроченной проверке, а на немедленной перечитывание выигрывает.
- Отсроченная проверкаdelayed test
- Проверка знаний через дни или недели после занятия, а не сразу. Единственный режим, в котором видно настоящее закрепление: немедленная проверка меряет в основном свежесть прочитанного.
- Иллюзия знанияillusion of knowing
- Ощущение владения материалом, возникающее от беглости чтения. Растёт от перечитывания и не связано с тем, сколько удастся воспроизвести потом. Лечится единственным способом: закрыть текст и попробовать.
- Порог начального припоминанияinitial retrieval success
- Условие, при котором самопроверка вообще работает: на первой попытке должно вспоминаться больше половины материала. Ниже порога преимущество перед перечитыванием исчезает, так что сначала разобраться, потом гонять.
- Публикационное смещениеpublication bias
- Перекос литературы в сторону крупных эффектов: работы, где эффекта не нашли, печатают реже. Признаком служит расхождение опубликованных и неопубликованных оценок, как 0,58 против 0,25 у эффекта самопроверки.
- Метапознаниеmetacognition
- Суждения о собственном знании: понял ли я, готов ли я, сколько вспомню. Систематически ошибаются в сторону оптимизма, поэтому их проверяют заданиями, а не самоощущением.
- Интервальное повторениеspaced repetition
- Возвращение к материалу через растущие промежутки вместо одного длинного захода. Работает в паре с самопроверкой: интервал создаёт забывание, а попытка вспомнить даёт закрепление.
- Затухание навыкаskill decay
- Потеря умения без практики. Причина, по которой курс заканчивается не экзаменом, а пятиминуткой через месяц: навыки, держащиеся на процедуре, сдуваются первыми.
Практикум · Финальный разбор
Итоговая работа курса: один большой текст, разобранный целиком, всеми инструментами сразу.
- Возьмите развёрнутый текст на спорную тему: колонку, лонгрид, расшифровку выступления.
- Стандартизируйте главный аргумент: тезис, посылки, скрытые допущения.
- Найдите и назовите ошибки: логические, статистические, приёмы подачи.
- Напишите стилмэн автора, сильнейшую версию его позиции, лучше, чем написал он сам.
- Вынесите вердикт и назовите, какого данного не хватает, чтобы вопрос закрыть. Объём от 700 до 900 слов.
5 заданий из итогового теста: решите прямо здесь
Сообщение: «Вчера ходили на базар, потом дождь пошёл, взяли самсу и поехали домой». Что здесь тезис?
- Тезис здесь «дождь испортил день»: остальные фразы поддерживают его, показывая, чем именно был испорчен день
- Тезис здесь «на базаре лучше, чем в супермаркете»: вслух он не сказан, но перечень покупок ведёт именно к нему
- Тезиса нет: это перечень событий по порядку, здесь ничего не утверждают и не доказывают
- Тезис здесь «самса на базаре лучшая»: только с этой фразой и можно поспорить
«Пропустишь платёж по кредиту, начислят пени, испортится кредитная история, следующий кредит не дадут». Это скользкий склон?
- Да: три перехода подряд это уже цепочка, а цепочка из трёх звеньев и есть скользкий склон
- Да: классическая цепочка катастроф, где каждый следующий шаг страшнее прошлого
- Нет: скользкий склон бывает в спорах о морали и политике, а не о деньгах
- Нет: каждый шаг здесь это задокументированное и вполне вероятное следствие предыдущего
Сервис доставки: клиенты с включёнными пуш-уведомлениями заказывают вдвое чаще. Менеджер: «включим пуши всем принудительно, заказы удвоятся». Что не так? ★
- Данных мало: сначала нужно опросить клиентов, нравятся ли им уведомления, и лишь потом включать
- Ошибка только в масштабе: заказы вырастут, но меньше чем вдвое, часть эффекта съест раздражение
- Пуши включили самые лояльные (самоотбор), и ответ даст лишь эксперимент со случайным включением
- Всё верно: связь установлена на реальных данных всей клиентской базы, а не на малой выборке
«Средний рост учеников класса 165 см. Значит, в классе есть ученик ростом 165 см». Верно ли?
- Да: среднее всегда попадает в кого-то из класса, иначе его не из чего было бы вычислить
- Верно только при нечётном числе учеников: тогда в середине обязательно кто-то стоит
- Нет: среднее может не совпадать ни с одним реальным значением
- Да: рост 165 см в такой группе самый частый, поэтому такой ученик найдётся
Приложение-определитель растений узнаёт вид «с точностью 96%». Пользователь: «раз оно назвало мой цветок редкой орхидеей, почти наверняка это она». Верен ли вывод? ★
- Нет: на редком виде большинство «опознаний» ложные, нужна база и разбивка ошибок
- Да, с небольшой поправкой на несовершенство данных: вероятность чуть ниже, порядка 90%
- Нет: приложения в принципе не способны надёжно определять растения
- Да: 96% это и есть 96%, вид почти наверняка определён верно
Нажмите на вариант: верный подсветится, разбор откроется. Все 30 заданий с итогом в итоговом экзамене курса.
Вопросы для самопроверки
Реклама: «Этот крем купили миллион женщин, значит, он работает». Какое допущение протаскивается?
- Миллион преувеличен маркетологами
- Крем дорогой, иначе бы столько не купили
- Мужчинам крем не подходит
- «Купили» означает «он помог»
«Этот йогурт полностью натуральный, значит, полезнее обычного». Какой приём?
- Апелляция к природе
- Апелляция к традиции: так делали всегда
- Ad hominem: удар по производителю
- Ошибки нет: натуральное и правда полезнее
В опросах около 90% водителей оценивают своё мастерство «выше среднего». Что это иллюстрирует?
- Опросы врут: люди отвечают не то, что думают
- Систематическую сверхуверенность: лучше медианного водителя может быть лишь половина
- Водители в целом хороши, отсюда и оценки
- Средний уровень очень низок, поэтому его легко превзойти
Футболист после лучшего сезона в карьере попал на обложку и следующий сезон сыграл слабее. «Сглазили!» Что произошло на самом деле?
- Регрессия к среднему: за экстремальным результатом обычно следует более обычный, а на обложку попадают на пике
- Сглаз: примета работает, её замечают все
- Обложка давит психологически: лишнее внимание мешает играть спокойно и добавляет ошибок
- Соперники изучили его игру и стали закрывать
Что значит «прогнозист хорошо калиброван»?
- Он осторожен и никогда не даёт точных цифр
- Из его прогнозов «уверен на 90%» сбывается примерно 9 из 10
- Он использует точные приборы и проверенные математические модели
- Он всегда прав: его прогнозы сбываются
Ответы и разбор открываются в самопроверке урока: она считает результат и отмечает урок пройденным. Пройти самопроверку.
Что читать
- Roediger & Karpicke, «Test-Enhanced Learning», Psychological Science, 2006: Первоисточник совета «решай, а не перечитывай». Открывать стоит ради таблицы с пятиминутной проверкой: именно та строка, где перечитывание выигрывает, из пересказов обычно исчезает.
- Rowland, «The effect of testing versus restudy on retention», Psychological Bulletin, 2014: Метаанализ, который расставляет границы приёма: порог начального припоминания и разрыв между опубликованными и неопубликованными работами. Полезнее любой книжки о продуктивности.
- van Gog & Sweller, «Not new, but nearly forgotten: the testing effect decreases or even disappears as the complexity of learning materials increases», Educational Psychology Review, 2015: Возражение и ответ на него напечатаны рядом. Хороший финальный текст для курса: видно, как выглядит открытый спор, в котором обе стороны правы наполовину и обе это признают.