Deanna Emery — AI researcher в Databricks. Ранее она была первым AI исследователем Quotient AI, компанию в 2026 году приобрела Databricks. Её работа связана с надёжностью языковых моделей, поисковых систем и AI агентов.
Она ведущий автор статьи о HalluMix, открытом бенчмарке из 6500 примеров по здравоохранению, праву, науке и новостям для проверки детекторов галлюцинаций. До Quotient она занималась астрофизикой в Harvard и Smithsonian Astrophysical Observatory, а в Aon работала над языковыми моделями для оценки интеллектуальной собственности. В докладах она рассказывает, как оценивать RAG и AI-поиск с помощью evals.
Темы докладов: RAG, поиск и эмбеддинги и Evals и бенчмарки.
AI Engineer World's Fair 20251
Оценка AI-поиска: практический фреймворк для дополненных AI-систем
Deanna Emery, Julia Neagu, Maitar Asher
AI Engineer World's Fair 2025
AI Engineer World's Fair 20241
Оптимизация RAG с помощью оценки
AI Engineer World's Fair 2024