Однажды один толковый человек предложил взглянуть на бенчмарки под необычным углом: а что, если использовать их не для поиска областей, где
ИИ уже превосходит человека, а наоборот — чтобы понять, где человек еще какое-то время останется на вершине пищевой цепочки?
Карпаты как-то говорил о «Теории зубчатой границы»: развитие ИИ не идёт плавным кругом — в одних направлениях он совершает резкие прорывы (например, программирование на Python), а в других заметно отстаёт (здравый смысл, стратегическое мышление, планирование наперёд).
Тогда я решил объединить топ-10 ключевых бенчмарков (MMLU, HumanEval, GSM8K и др.) с международной классификацией профессий (МСКЗ-08 / ISCO-08) и составил ТОП-100 видов деятельности, которые ИИ отберёт у человека в самую последнюю очередь.
В целом закономерность проста: чем больше задача требует телесного опыта, глубокого междисциплинарного понимания и чувствительности к социальному контексту, тем дальше ИИ от способности справиться с ней.
ТОП-100 антиии-профессий (проверь, есть ли там твоя): https://docs.google.com/spreadsheets/d/1KkFbsomcyKKWuVkTNqbcghjPdDgHeRv-/edit?usp=sharing&ouid=101342767195455671095&rtpof=true&sd=true