← Каталог

· AI Engineer World's Fair 2025

Отчёт о состоянии AI-инжиниринга в 2025 году

The 2025 AI Engineering Report — Barr Yaron, Amplify Partners

По опросу 500 AI-инженеров, LLM в продакшене уже широко распространены, но управление промптами и мониторинг отстают.

  • RAG и дообучение — 70% респондентов используют RAG, а среди тех, кто дообучает модели, 40% называют LoRA или QLoRA; supervised fine-tuning остаётся самым частым базовым подходом.
  • Промпты без управления — 70% обновляют промпты хотя бы раз в месяц, но 31% не имеют никакого способа управлять ими.
  • Агенты с правом записи — по данным опроса, большинство агентов в продакшене могут писать в системы, обычно с human-in-the-loop; при этом LLM в работе хвалят 80%, а агенты меньше 20%.
  • Мониторинг и оценка — 60% используют стандартную observability, больше половины оффлайн evals, но качество чаще всего проверяют ручным ревью; оценку опрошенные назвали самой болезненной частью работы.

Кому полезно: тем, кто хочет сверить свою практику дообучения, управления промптами и мониторинга с тем, что делают другие команды.

Статья по теме

Главы

Ещё доклады: Barr Yaron

Страница спикера →

Похожие доклады