← Каталог

· AI Engineer World's Fair 2024

Готовить на огне, не спалив кухню

Cooking with fire without burning down the kitchen

Чтобы не подвести клиентов сырым AI-продуктом, Twilio выпускает ранние версии через отдельный бренд Twilio Alpha с явно заданными ожиданиями по надёжности.

  • Ранние версии под отдельным брендом — Twilio Alpha задаёт клиентам понятные ожидания по надёжности и доступности, поэтому команда открывает лист ожидания для developer preview и быстро собирает обратную связь. Идея заимствована у GitHub Next и Cloudflare.
  • Внутренние хакатоны с черновыми прототипами — клиенты приходили в офис и на один день получали доступ к прототипам со всеми недоработками, а их список проблем стал основным источником данных. Команда также проверяла продукт на собственных задачах, например на IT helpdesk.
  • Проверка новых моделей за день — каждую новую модель сверяют с известными ограничениями команды; при выходе 3.5 Sonnet решали за сутки, брать её в работу или отложить в бэклог.
  • Roadmap с учётом скорости изменений — требования, которые не меняются (безопасность и доверие), стоит закладывать в план, а быстро меняющиеся (мультимодальность) планировать гибко.

Кому полезно: тем, кто встраивает LLM-функции в продукт для существующих клиентов и хочет выпускать эксперименты, не снижая качество для всей базы.

Статья по теме

Главы

Ещё доклады: Dominik Kundel

Страница спикера →

Похожие доклады