Joel Becker — основатель и гендиректор Qally's, исследователь оценки ИИ. Ранее работал в техническом составе METR, где участвовал в разработке метрики временного горизонта автономных возможностей ИИ, откалиброванной по людям. Он соавтор рандомизированного эксперимента, в котором опытные разработчики open source с ИИ-инструментами работали на 19 процентов медленнее, чем без них. Также участвовал в исследовании pull request, написанных агентами: около половины прошедших бенчмарки изменений не были бы приняты мейнтейнерами. В докладах он рассматривает разрыв между результатами бенчмарков и реальной продуктивностью разработки ПО.

Темы докладов: Evals и бенчмарки и Внедрение AI и оргизменения.

AI Engineer Code 20252