«Мне нравится» измеряет не качество ответа, а вашу реакцию

Удобный тон, уверенная формулировка и согласие с собеседником легко получают высокий балл — даже если внутри есть фактическая ошибка. И наоборот: точный ответ может раздражать, потому что он осторожный, длинный или противоречит ожиданиям.

Поэтому лайк полезен лишь для оценки впечатления. Качество лучше разложить заранее: выполнена ли инструкция, подтверждаются ли факты, не пропущены ли условия, честно ли обозначена неопределённость. Тогда приятность останется отдельным критерием, а не маской для всего сразу. Иначе мы обучаем ИИ прежде всего нравиться — не обязательно быть правым.

#оценкаИИ #качествоИИ #метрики

«Мне нравится» измеряет не качество ответа, а вашу реакцию
Удобный тон, уверенная формулировка и согласие с собеседником легко получают высокий балл — даже если внутри есть фактическая ошибка | Сетка — социальная сеть от hh.ru