Stephanie Jarmak — AI engineer в Omni, research affiliate проекта NASA Science Explorer и мейнтейнер open source SDK Gas City для построения систем оркестрации агентов. В Sourcegraph она создала бенчмарк CodeScaleBench для оценки coding агентов на крупных кодовых базах, а в EnterpriseBench проверяет, находят ли агенты нужный код в цепочках зависимостей репозиториев.
До перехода к коду Jarmak занималась планетарной наукой: работала в Southwest Research Institute над астероидами и кольцами Сатурна, затем была project scientist NASA Astrophysics Data System. Её доклады посвящены тому, как тестировать агентов как эксперименты и как агенты используют инструменты разработки и рекомендуют их.
Темы докладов: Evals и бенчмарки, Запуск и развитие AI-продукта и Observability и трейсы.
Другое1
AI Engineer World's Fair 20261
Смерть developer advocates
AI Engineer World's Fair 2026