Оценка не для журнала, а для следующего урока
Формирующее оценивание
Работает, но эффект меньше легендарного и сильно зависит от того, как учителя это делают.
Обычная оценка говорит, что ученик уже знает. Формирующая — что учителю делать на следующей минуте. Рассказываем, как обзор двух британских учёных превратил это различие в мировое движение, откуда взялись громкие цифры и почему реальный эффект оказался скромнее, но всё равно стоит усилий.
Что происходит в чёрном ящике
К концу 1990-х британскую школу реформировали много лет подряд. Новые программы, национальные тесты, рейтинги школ. Пол Блэк, физик, ставший исследователем образования, и Дилан Уильям, бывший школьный учитель математики, оба из Королевского колледжа Лондона, заметили странность. Реформы управляют тем, что входит в класс, и измеряют то, что выходит. А сам класс остаётся чёрным ящиком: никто не смотрит, что там происходит.
Блэк и Уильям решили собрать всё, что известно об одной вещи внутри этого ящика — о том, как учитель на ходу выясняет, что поняли ученики, и меняет урок. В 1998 году вышел их обзор: материал из 250 источников. Вывод: если учитель регулярно собирает такие сигналы и действует по ним, ученики учатся заметно лучше, особенно отстающие.
Для учителей и чиновников авторы написали короткую брошюру «Внутри чёрного ящика». В ней прозвучала цифра, которую потом повторяли десятилетиями: эффект от 0,4 до 0,7 стандартного отклонения. Это больше, чем у почти любой другой школьной реформы.
Сами авторы понимали, что обзор — не рецепт. С 1999 года они работали с 24 учителями математики и естествознания из шести школ в графствах Медуэй и Оксфордшир. Учителя пробовали приёмы в своих классах, отказывались от неработающих, придумывали свои. В их классах ученики сдали тесты лучше, чем в параллельных.
Формирующее оценивание стало государственной политикой в Британии и разошлось по миру. А цифру 0,4–0,7 начали проверять. В 2011 году метаанализ дал куда более скромный эффект — около 0,2. Спор о размере эффекта идёт до сих пор. Спор о том, стоит ли выяснять, что поняли ученики, до конца урока, почти закончился.
источников разобрали Блэк и Уильям в обзоре 1998 года, с которого началось движение
- 1Цельчто учим и как выглядит успех
- 2Вопросотвечают все сразу
- 3Сигналучитель видит распределение ответов
- 4Решениедальше или объяснить иначе
Дилан Уильям свёл практику к пяти стратегиям. Суть одна: урок — это цикл, где учитель постоянно выясняет, что поняли ученики, и меняет план.
Ясная цель
Ученики знают, чему учатся и как выглядит хорошая работа. Лучше показать образцы, чем читать критерии.
Вопрос-развилка
В ключевой момент урока учитель задаёт вопрос с вариантами, где каждый неверный ответ выдаёт конкретное заблуждение. По ответам он решает: идти дальше или объяснить иначе.
Без поднятых рук
Отвечают все: на мини-досках, карточками, в опросе. Или учитель вызывает случайного ученика. Так сигнал идёт от всего класса, а не от трёх отличников.
Обратная связь, которая двигает
Комментарий говорит, что исправить и как. Отметка рядом с комментарием часто перетягивает внимание на себя, поэтому её откладывают.
Билет на выход
В конце урока — один-два вопроса на листке. Учитель за пять минут видит, с чего начать завтра.
Ученики оценивают друг друга и себя
По образцу и критериям ученики проверяют работы соседа и свои. Постепенно они начинают видеть ошибки до учителя.
Работает, но эффект меньше легендарного и сильно зависит от того, как учителя это делают.
Цифра 0,4–0,7 из «Чёрного ящика» — не результат метаанализа, а обобщение разнородных исследований. В 2011 году Нил Кингстон и Брук Нэш просмотрели более 300 работ и нашли только 13 с достаточными данными. Средневзвешенный эффект — около 0,2. В языке и литературе больше, в естественных науках меньше. Их метаанализ, в свою очередь, критиковали за методологию: спор о точной цифре не закрыт.
В проекте с учителями из Медуэя и Оксфордшира средний эффект составил около 0,3. В 2018 году британский фонд EEF проверил программу Уильяма «Embedding Formative Assessment» на 140 школах и примерно 25 000 учеников. Результат — около двух месяцев дополнительного прогресса по итоговым экзаменам, с высокой надёжностью. Отдельно по английскому и математике эффекта не нашли.
Итог: хорошо поставленное формирующее оценивание даёт небольшой, но устойчивый прирост, сопоставимый с другими удачными школьными программами. Чуда нет, но для бесплатного по сути приёма это много.
Слишком широкое понятие
Формирующим называют всё — от вопроса-развилки до еженедельного компьютерного теста. Поэтому исследования сравнивают разные вещи, и средний эффект мало что говорит о конкретном приёме.
Цифру продают громче, чем она есть
0,4–0,7 до сих пор кочует по презентациям для учителей. Хотя это обобщение разнородных исследований, а не результат точного расчёта.
Бюрократия съедает суть
В ряде школ формирующее оценивание превратилось в отчётность: таблицы, цветные стикеры, формулировки целей на доске. Ритуал есть, а решений по итогам — нет.
Методологу
Вставьте в каждый модуль 2–3 точки-развилки: короткую проверку и заранее подготовленный план «если большинство ошиблось — вот другое объяснение». Без плана Б проверка бесполезна.
Автору курса
Пишите тестовые вопросы так, чтобы каждый неверный вариант соответствовал типичной ошибке. Тогда ответ ученика — диагноз, а не просто балл.
Эксперту и преподавателю
Перестаньте спрашивать «Всем понятно?». Задайте вопрос, на который всем надо ответить одновременно, и посмотрите на распределение ответов.
Себе
После каждой главы ответьте письменно на два вопроса: что было главным и что осталось непонятным. Второй ответ — ваш план на следующий раз.
За пять минут до конца следующего занятия раздайте листки с одним вопросом по теме. Разложите ответы на три стопки: поняли, частично, не поняли. Начните следующее занятие с того, что покажет самая высокая стопка.
- Paul Black, Dylan Wiliam. Assessment and Classroom Learning. Assessment in Education, 1998
- Paul Black, Dylan Wiliam. Inside the Black Box: Raising Standards Through Classroom Assessment. Phi Delta Kappan, 1998
- Dylan Wiliam et al. Teachers developing assessment for learning: impact on student achievement. Assessment in Education, 2004
- Neal Kingston, Brooke Nash. Formative Assessment: A Meta-Analysis and a Call for Research. Educational Measurement: Issues and Practice, 2011
- Dylan Wiliam. Embedded Formative Assessment, 2011