← Каталог

ИИ пишет код быстрее, чем команда успевает его ревьюить

AI Writes Code Faster Than Your Team Can Review It - Andrew Norrish, Sourcegraph

AI-код попадает в продакшен быстрее, чем его успевают проверить, и поиск по всему коду помогает SRE находить причины инцидентов и массово исправлять их.

  • Код-ревью как узкое место — по оценкам отраслевых организаций, число слитых PR почти удвоилось, а размер PR вырос больше чем вдвое, поэтому разработчики тратят на ревью почти вдвое больше времени.
  • Поиск первопричины — детерминированный поиск по всем репозиториям, веткам и коммитам делается одним запросом; по словам спикера, это сокращает поиск причины инцидента с дней до минут.
  • Агент для RCA — в компании с более чем 5000 разработчиков агент запускается при падении сервиса или всплеске ошибок, находит тег, выкаченный в продакшен, и по истории Git определяет коммит и автора.
  • Массовые исправления — правка, найденная в одном репозитории, применяется ко всем затронутым сервисам массовыми изменениями, без ожидания, пока каждая команда внесёт её сама.

Кому полезно: SRE и платформенным командам в больших кодовых базах, где инциденты всё чаще связаны с непроверенным AI-кодом. Доклад в основном рассказывает о продукте Sourcegraph, но описанные приёмы применимы и без него.

Статья по теме

На какие вопросы отвечает доклад

  • Как найти причину инцидента, если его вызвал код, который никто не проверял?

    Поиск по всем репозиториям, веткам и коммитам одним запросом: по словам спикера, первопричину находят за минуты вместо дней. Для вопросов о системе есть deep search с цитируемыми ответами.

    ▶ 13:14Расследование, предотвращение и устранение проблем
  • Как быстро распространить исправление по сотням репозиториев, если команды применяют его вручную?

    Инструменты находят все затронутые места, а массовые изменения во всех репозиториях организации применяют исправление сразу. Мониторы предупреждают о коммитах с рискованными паттернами.

    ▶ 13:14Расследование, предотвращение и устранение проблем
  • Как автоматически находить коммит и автора, который вызвал падение сервиса после деплоя?

    Агент запускается при падении сервиса или росте ошибок, определяет ветку или тег, выкаченные в продакшен, и агентным поиском по истории Git находит коммит и автора. Клиент с более чем 5000 разработчиков сделал так.

    ▶ 15:00Примеры клиентов
  • Как разбирать поток отчетов об уязвимостях, если команда безопасности не успевает их читать?

    Вебхук из HackerOne запускает агентный поиск по коду, который решает, нужна ли команде безопасности глубокая проверка, стоит ли предложить исправление или отчет можно закрыть.

    ▶ 15:00Примеры клиентов
  • Как агенту искать по сотням веток монорепо и не полагаться на недетерминированный поиск?

    Для набора evals из сотен веток использовали read-only агента CodeFinder, который ищет по всем веткам быстро и дешево. Когда evals проходят, запускаются процессы push и publish.

    ▶ 15:00Примеры клиентов
  • Почему code review стал узким местом, когда AI пишет код быстрее команды?

    По оценкам отдельных организаций, число слитых pull request почти удвоилось, а их размер больше чем вдвое вырос, поэтому разработчики тратят на code review почти вдвое больше времени.

    ▶ 7:06Что показывают отраслевые данные

Главы

Похожие доклады