← Каталог

· AI Engineer World's Fair 2026

Как Autoresearch меняет исследования в машинном обучении

How Autoresearch Is Changing ML Research — Zhengyao Jiang, Weco AI

Агент, который публикует работу как PR, по словам авторов, получает признание сообщества: семь рекордов в Parameter Golf и переиспользование другими.

  • Признание сообщества как метрика — h-index по PR у Aiden равен 10, у следующего участника-человека 7. Спикер считает, что то, насколько другие строят на вашей работе, говорит о её ценности сильнее, чем одна строка в таблице лидеров.
  • Проверка перед публикацией — агент отправляет PR только после проверки результатов. По словам авторов, 28% его отправок попали в таблицу лидеров, примерно в шесть раз выше среднего по сообществу.
  • Идеи из чужих статей и PR — почти все рекордные идеи пришли от людей. Gated Attention из статьи Qwen нарушил лимит в 16 МБ, агент добавил квантизацию, а улучшение токенизатора от другого участника в связке с ними дало заметный скачок.
  • Eval и абстракция задают направление поиска — eval работает как функция потерь. Строгий API в задаче детекции мошенничества снизил утечку тестовых данных до нуля, хотя агент при желании мог бы обойти ограничение.

Кому полезно: инженерам, которые запускают автоматические эксперименты с обучением моделей и проектируют для агента eval и структуру кода.

Статья по теме

Главы

Ещё доклады: Zhengyao Jiang

Страница спикера →

Похожие доклады