Почему агенты для программирования пока не дают обещанной выгоды
DeepSeek нашёл дыру в плане Gemini: сырые логи утопят бюджет токенов
Автор статьи, сооснователь и технический директор Undo Грег Лоу, объясняет, что ИИ-агенты быстро генерируют код, но узкое место смещается к пониманию этого кода, поиску ошибок и разбору инцидентов. Чем больше сгенерированного кода накапливается, тем сложнее разработчикам разобраться в логике и связях между системами. По данным автора, 79% руководителей инженерных команд не отмечают ускорения релизных циклов, а 93% организаций сталкивались с неверно определённой корневой причиной из-за галлюцинаций ИИ. Решение — давать агентам не только исходники и логи, но и записи реального выполнения кода.
Материал TechRadar Pro — колонка Грега Лоу, сооснователя и технического директора компании Undo. Его главный тезис: агенты для программирования действительно ускоряют написание кода, но обещанной общей продуктивности пока не дают, потому что узкое место перемещается на более поздние этапы разработки. Когда код уже сгенерирован, инженерам нужно понять, что он делает, как связан с окружающими системами, где может скрываться ошибка и что стало причиной инцидента. Именно на это уходит время, и чем больше кода появляется, тем сложнее становится разбираться в его поведении. Автор описывает «разрыв в понимании кода». ИИ может выдать код за минуты, но при накоплении такого кода дублируется логика, а изменения наслаиваются друг на друга. Кодовая база постепенно запутывается, и разработчикам труднее понять, как она работает и с чего начать поиск проблемы. Особенно остро это проявляется в сложных и критичных средах — от финансовых сервисов и проектирования полупроводников до сетей и баз данных. В таких областях одна ускользнувшая ошибка может привести к серьёзным последствиям: неверному значению в торговой системе, неправильной строке из базы или сбою сети. В статье приводится пример британского национального авиадиспетчера: недавний сбой, вызвавший 2000 отмен рейсов и несколько дней нарушений, был связан с дефектом в унаследованном программном обеспечении. По словам автора, девять из десяти руководителей инженерных команд говорят, что понимание кода и отладка занимают больше времени в сложных средах, например в кодовых базах на C и C++. Люди и раньше не всегда успевали за объёмом кода, а теперь ИИ гораздо хуже справляется с отладкой сложного кода, чем с его созданием. В результате инженеры тонут в проверке, а дефекты чаще попадают в продакшен без понятного пути к их корневой причине. Кроме того, 79% руководителей отмечают, что циклы выпуска не стали быстрее, хотя писать код стало легче. Отдельно разбираются ограничения ИИ в отладке. Агенты часто работают со статичным контекстом: исходным кодом, логами и документацией. Это подсказывает, что код должен делать, но не показывает, что он реально сделал во время выполнения. Агенту приходится достраивать картину и догадываться. Он может выдать правдоподобный ответ без доказательств, и тогда диагноз не гарантированно верен. Автор приводит данные: 93% инженерных организаций сталкивались с неверно определённой корневой причиной из-за галлюцинации ИИ, а 37% команд используют агентов для понимания и отладки только простых кодовых баз. Если агент не находит причину, он может переходить к методу проб и ошибок, добавлять логи, перезапускать код и тратить токены, не приближаясь к решению. Вывод статьи: улучшать результаты стоит не только за счёт более мощной модели, но и за счёт более качественных свидетельств. Если дать агенту запись того, что происходило при реальном выполнении кода, ему будет проще проследить проблему до корневой причины. Для разработчика это означает, что ценность ИИ не только в скорости генерации, но и в способности быстрее разбираться в поведении системы и увереннее браться за сложную отладку.