19% больше времени на выполнение задачи тратят разработчики, когда начинают использовать ИИ помощников

19% больше времени на выполнение задачи тратят разработчики, когда начинают использовать ИИ помощников.

Исследование некоммерческой организации METR (Model Evaluation and Threat Research) разрушило мой миф о мгновенной продуктивности. На конференции VLDC во Владивостоке Александр Мурзагалин из Яндекс Маршрутизации в своем докладе поделился опытом, что его команда перестала писать код руками, но окончательно утонула в его проверке.

Я иногда использую чаты, чтобы они помогли мне накидать код на HTML и CSS. Я потом создаю визуализации на основе этого кода. И они делают это очень быстро. 10 секунд и передо мной уже готовая визуализация и 500 строк кода. Вроде все круто, но ровно до того момента, пока не придется что-то изменить в этом коде. Поддерживать это крайне сложно. Попытка разобраться в нем отнимает не меньше времени, чем написание с нуля.

Данные Microsoft Research за 2026 год показывают еще более тревожную картину. Merge rate при ИИ ревью составляет 45,2%, тогда как у людей он достигает 68,4%. Более 60% комментариев от ИИ агентов при проверке это обычный цифровой шум, ложные срабатывания и очевидные замечания. Ревьюеры просто устают от этого потока и начинают игнорировать правки, пропуская критические баги. Раньше я думала, что автоматизация решит вопрос нехватки рук. Однако, бутылочное горлышко переехало из написания кода в его проверку и интеграцию.

На конференции автор сказал мысль, которая мне понравилась. Запрещать нейронки бесполезно. Нужно менять метрики, которые мы отлеживаем. Старые метрики вроде количества строк кода или закрытых задач не работают. Компании начинают измерять как часто они деплоят и сколько реальных ошибок в проде вылезает после таких быстрых правок.

Если ИИ делает нас быстрее в написании, но медленнее в выпуске готового продукта, не пора ли нам признать, что мы просто научились быстрее генерировать технический долг?

#vldc #ai #analytics