Joel Becker — основатель и гендиректор Qally's, исследователь оценки ИИ. Ранее работал в техническом составе METR, где участвовал в разработке метрики временного горизонта автономных возможностей ИИ, откалиброванной по людям. Он соавтор рандомизированного эксперимента, в котором опытные разработчики open source с ИИ-инструментами работали на 19 процентов медленнее, чем без них. Также участвовал в исследовании pull request, написанных агентами: около половины прошедших бенчмарки изменений не были бы приняты мейнтейнерами. В докладах он рассматривает разрыв между результатами бенчмарков и реальной продуктивностью разработки ПО.
Темы докладов: Evals и бенчмарки и Внедрение AI и оргизменения.
AI Engineer Code 20252
Почему хайп вокруг AI-агентов может расходиться с реальностью
AI Engineer Code 2025
Долгие задачи и продуктивность опытных разработчиков open source
AI Engineer Code 2025