Создание интерфейсов для агентов: уроки Chrome DevTools (MCP)
Building Agent Interfaces: Lessons from Chrome DevTools (MCP) for Agents
Интерфейс MCP-сервера для агентов работает лучше, если его проектируют под расход токенов, восстановление после ошибок и доверие пользователя, даже ценой удобства.
- Метрика tokens per successful outcome — считает токены на успешно завершённый сценарий, поэтому дешёвый интерфейс, который не доводит задачу до конца, не выигрывает. Сравнивать стоит внутри одного пользовательского сценария, а не между разными задачами.
- Сводки вместо сырых данных — трейс производительности в десятки тысяч строк JSON переполнял контекст модели. По словам спикера, Markdown-сводка с метриками LCP и INP даёт агенту нужное без лишнего.
- Ошибки как подсказки для самовосстановления — одна добавленная фраза в сообщение об ошибке, что записи истории не найдено, позволила агенту исправиться без помощи человека. Проактивные перенаправления направляют агента к нужному инструменту, например к трейсу вместо Lighthouse.
- Описания и доверие — монолитный инструмент разбили на 25, но выбор инструмента от этого не стал проще. По данным статьи, которую цитирует спикер, 97% описаний MCP-инструментов содержат дефекты качества.
Кому полезно: тем, кто проектирует MCP-серверы или CLI для агентов и хочет мерить их эффективность на реальных сценариях.
Статья по теме
На какие вопросы отвечает доклад
Как не забивать контекст агента, когда инструмент возвращает огромный трейс производительности?
Вместо сырого трейса на десятки тысяч строк JSON инструмент отдаёт Markdown с семантической сводкой метрик вроде LCP и INP, и агент читает только нужные места.
▶ 3:55Трейсы производительности, семантические сводки и метрики Web VitalsКак измерить, сколько токенов агент тратит на одну успешно решённую задачу?
Метрика tokens per successful outcome сочетает успешность завершения сценария и затраты токенов, вызовов инструментов и времени. Сравнивать её нужно внутри одного пользовательского сценария, а не между разными задачами.
▶ 7:55Токены на успешный результат и категоризация инструментовСколько MCP-инструментов давать агенту, чтобы не раздувать контекстное окно?
Нишевые инструменты спрятали за флагами командной строки, а для минимального режима оставили три инструмента. Цена такого сокращения в том, что агенту нужны дополнительные шаги, а часть задач он не решит.
▶ 7:55Токены на успешный результат и категоризация инструментовКак писать сообщения об ошибках в MCP-инструментах, чтобы агент сам исправлял вызов?
В ошибку добавили последнюю фразу с подсказкой, что делать дальше, и агент самостоятельно исправил вызов навигации. Для типовых сбоев есть skill для диагностики настройки, который помогает агенту и человеку.
▶ 7:55Токены на успешный результат и категоризация инструментовПочему агент выбирает не тот инструмент и как улучшить описания MCP-инструментов?
По данным упомянутой статьи, у 97% описаний MCP-инструментов есть проблемы качества. Описание должно объяснять назначение и условия вызова, но более длинные описания раздувают контекст, а маленькие модели чаще берут лишние инструменты.
▶ 16:27Компромиссы между описаниями инструментов и context windowНужно ли каждый раз подтверждать доступ агента к браузеру с данными пользователя?
Спикер оставил запрос подтверждения намеренно: для локальной разработки человек разрешает доступ на ограниченное время. Для агентов в CI нужны отдельные профили и контейнеры, а для агентов с выходом в интернет — allow list доменов и защита от prompt injection.
▶ 16:27Компромиссы между описаниями инструментов и context window
Главы
Похожие доклады
Создание агентов с Model Context Protocol
AI Engineer Summit 2025
Близко по содержанию
Взаимодействие — это всё, что нужно
AI Engineer World's Fair 2026
Близко по содержанию
Тёмное искусство веб-автоматизации: учим агентов пользоваться сайтами как люди
AI Engineer World's Fair 2026
Близко по содержанию
Как адаптировать публичный MCP-сервер, не ломая его
AI Engineer Europe 2026
Близко по содержанию

