Удовлетворённость против результата: чего не видят NPS и CSI

Если человек вышел из ресторана довольным, значит ресторан своё дело сделал. А теперь то же самое про врача. Пациенту понравился приём- значит ли, что диагноз верный? Студент поставил курсу пятёрку- значит ли, что он чему-то научился? Чем сложнее услуга и чем дороже ошибка, тем меньше довольное лицо клиента годится как доказательство качества. В образовании это особенно больно. NPS - про готовность рекомендовать. CSI- про то, насколько человеку было удобно по каждому отдельному кусочку опыта. Метрики рабочие, хоронить я их не собираюсь. Но обе меряют отношение к обучению, а не само обучение. У Киркпатрика это нижний уровень - реакция. Над ним ещё три этажа: появились ли знания, применяет ли их человек в работе, сдвинулось ли что-то в показателях организации. Можно собрать прекрасный NPS на первом этаже и ровный ноль на остальных трёх. Харизматичный спикер, красивые слайды, посильные задания. Девять из десяти. Через месяц человек не воспроизводит ничего. Бывает и зеркально: программа получает рваные оценки ровно потому, что заставляет думать, ошибаться и упираться в границы собственных знаний.

Как это выглядит изнутри В Школе 21 конфликт был не теоретическим, а ежедневным. Там нет преподавателя, который выйдет и объяснит правильный ответ: есть задача, другие такие же студенты и право ошибиться. Для привычного образовательного сервиса отсутствие готового объяснения - дефект. Внутри такой модели самостоятельность один из главных результатов. И здесь начинается самая тяжёлая часть работы методолога: отличить продуктивную трудность от бесполезного трения. Продуктивная трудность - человеку тяжело, потому что он делает то, чего раньше не умел, и постепенно перестаёт нуждаться в подсказке. Трение- тяжело из-за криво написанного задания, падающей платформы, правил, поменявшихся на середине, оценивания, которое выглядит нечестным. В отзыве и то и другое звучит одинаково: «было сложно, мне ничего не объяснили». А делать нужно противоположное. Первое беречь - оно и есть обучение. Второе вырезать: оно только съедает силы студента. Поэтому низкая оценка никогда не была для меня готовым управленческим решением. Она была входом в диагностику.

Когда удовлетворённость становится целью Работает закон Гудхарта: показатель, превращённый в цель, перестаёт быть хорошим показателем. Опустить порог отбора, упростить задания, убрать неопределённость, заменить честную обратную связь поддерживающей, подтянуть процент дошедших до конца -удовлетворённость вырастет. И ровно в этот момент программа начнёт терять то единственное, ради чего создавалась, - способность менять человека. Подмена происходит тихо: комфорт начинает читаться как качество, завершение - как освоенный навык, лёгкость прохождения - как доступность образования. Хотя доступное и легкое обучение это разные вещи.

Что делать вместо Выбрасывать NPS не надо: игнорируя впечатления студентов, легко прикрыть сильной методикой хаос, непрозрачность и бессмысленную перегрузку. Надо просто перестать считать его доказательством качества. Сначала образовательный результат: справляется ли человек с задачей, которую раньше не встречал, что от навыка останется через полгода. Потом перенос в деятельность: применяет ли в работе, меньше ли ошибок. Потом эффект для организации: скорость выхода на продуктивность, качество процессов, те показатели, ради которых обучение вообще затевали. И только четвёртым - образовательный опыт, где и живут NPS с CSI. Их работа не отчитываться за качество, а ловить лишнее трение и следить, чтобы результативное обучение оставалось человеческим. Четвёртый контур не заменяет первые три. Никогда. Студент - абсолютный эксперт в том, что он пережил. Но он не обязан знать, какая образовательная конструкция даст ему лучший результат через год. Это не его работа. Если после обучения человек остался прежним, но поставил пять звёзд - вы, возможно, сделали приятный сервис. Но пока ещё не образование. #образование #EdTech #методология #NPS #CSI

Удовлетворённость против результата: чего не видят NPS и CSI | Сетка — социальная сеть от hh.ru