← Каталог

Почему люди не успевают за кодом, написанным ИИ

Why Humans Can't Keep Up With AI-Written Code - Tariq Shaukat, Sonar

Четыре элемента уверенности в поставке кода (ясный замысел, guide rails, независимая верификация и аудируемые доказательства) перемножаются, поэтому отсутствие любого из них обнуляет уверенность во всей агентной фабрике.

  • Разрыв между кодом и релизами — по данным цитируемого исследования, строки кода выросли на 2450%, коммиты на 240%, а релизы только на 30%, так что генерация кода не равна поставке.
  • Ненадёжные LLM-судьи — по ссылке на исследование PayPal AI, вердикты одной и той же модели меняются в 7–17% повторных прогонов, поэтому один LLM-судья как проверка не годится.
  • Верификация внутри цикла агента — по словам спикера, Sonar Vortex, который даёт агенту замысел, направляющие подсказки и проверку в цикле, снизил стоимость токенов на 36% и число проблем в коммитах на 92%; это цифры авторов, без независимой проверки.

Кому полезно: тем, кто проектирует пайплайн, где агенты пишут код, а люди его проверяют; доклад во многом презентация продукта Sonar, но описанные разрывы применимы и без него.

Статья по теме

Главы

Ещё доклады: Tariq Shaukat

Страница спикера →

Похожие доклады