Phil Hetzel — Head of Solutions Engineering в Braintrust, где помогает командам переводить прототипы генеративного AI в надёжные системы в эксплуатации. Его работа связана с оценкой агентов, observability и инфраструктурой для измерения качества AI-приложений. В консалтинге он провёл 12 лет: четыре года в KPMG и восемь в Slalom Consulting, где руководил глобальным направлением Databricks. Он говорит об evals, основанных на экспертной оценке и валидации LLM-as-a-judge, и называет Brainstore инфраструктурой для анализа больших трасс выполнения агентов. В докладах на AI Engineer Europe 2026 он рассматривает зрелость практик evals, отличия observability агентов от традиционной и распределение ответственности за агентов между командами.
Темы докладов: Evals и бенчмарки, Observability и трейсы, Инфраструктура и надёжность и Внедрение AI и оргизменения.
AI Engineer Europe 20264
Почему сложно создавать платформы для evals
AI Engineer Europe 2026
Этапы зрелости evals
AI Engineer Europe 2026
Чем o11y для агентов отличается от традиционной o11y
AI Engineer Europe 2026
Должна ли GenAI быть только в ведении дата-сайентистов?
AI Engineer Europe 2026