· AI Engineer World's Fair 2025
Отчёт о состоянии AI-инжиниринга в 2025 году
The 2025 AI Engineering Report — Barr Yaron, Amplify Partners
По опросу 500 AI-инженеров, LLM в продакшене уже широко распространены, но управление промптами и мониторинг отстают.
- RAG и дообучение — 70% респондентов используют RAG, а среди тех, кто дообучает модели, 40% называют LoRA или QLoRA; supervised fine-tuning остаётся самым частым базовым подходом.
- Промпты без управления — 70% обновляют промпты хотя бы раз в месяц, но 31% не имеют никакого способа управлять ими.
- Агенты с правом записи — по данным опроса, большинство агентов в продакшене могут писать в системы, обычно с human-in-the-loop; при этом LLM в работе хвалят 80%, а агенты меньше 20%.
- Мониторинг и оценка — 60% используют стандартную observability, больше половины оффлайн evals, но качество чаще всего проверяют ручным ревью; оценку опрошенные назвали самой болезненной частью работы.
Кому полезно: тем, кто хочет сверить свою практику дообучения, управления промптами и мониторинга с тем, что делают другие команды.
Статья по теме
Главы
Ещё доклады: Barr Yaron
Страница спикера →Битва за frontier AI
Paige Bailey, Barr Yaron, Colin Flaherty, Shrestha Basu Mallick, John, Mihir, Petra, Steven, Tina
AI Engineer Summit 2025
Состояние AI-инженерии в 2026 году
AI Engineer World's Fair 2026
Похожие доклады
Адаптация и fine-tuning LLM для специализированных областей
AI Engineer Summit 2023
Близко по содержанию
AI-консалтинг на практике
AI Engineer Code 2025
Близко по содержанию
Стартапы и ИИ в 2025 году
AI Engineer World's Fair 2025
Близко по содержанию

