Что именно означает «декодировать эмоциональное состояние»
В Nature Computational Science вышла работа, где исследователи в реальном времени оценивали эмоциональное состояние человека по внутримозговым сигналам.
В исследовании участвовали 18 человек с intracranial EEG. Во время просмотра изображений и видео они сами оценивали своё состояние по двум параметрам - valence, то есть насколько переживание было положительным или отрицательным, и arousal, степени возбуждения. На этих данных для каждого участника обучали персонализированную deep-learning модель.
Модели смогли работать с небольшой задержкой и переносить декодирование между двумя типами заданий.
Но формулировка «ИИ читает эмоции» здесь была бы очень неточной. Система не получила доступ к некоторому объективному эмоциональному состоянию, спрятанному внутри мозга. Сначала сам человек описывал своё переживание с помощью заданных шкал. Затем модель училась находить в его индивидуальной нейронной активности паттерны, связанные с этими самооценками.
Здесь особенно хорошо видна ко-адаптация измерения. Исследователь задаёт категории, человек переводит в них своё состояние, модель обучается на связи между этими категориями и сигналом мозга.
То есть даже очень прямое измерение нейронной активности не устраняет человеческую интерпретацию. Она уже находится внутри того, чему именно модель учится.
Источники