Carlos Esteban — solutions engineer, специализируется на AI evaluation, облачной инфраструктуре и кибербезопасности. Сейчас он работает в Wiz, где применяет опыт в evaluation и наблюдаемости к AI-powered cloud security. Ранее он был первым solutions engineer в Braintrust, где помогал клиентам внедрять evaluation, observability и системы обратной связи. До этого работал в HashiCorp, помогая компаниям внедрять Terraform и Vault.
На AI Engineer World's Fair 2025 он провёл два воркшопа по AI evaluation: один с Notion и Braintrust о production AI, другой о переходе от playground к production. Темы выступлений включают LLM-as-a-judge, CI-интеграцию evals и экспертную проверку результатов.
Темы докладов: Evals и бенчмарки, Observability и трейсы и RAG, поиск и эмбеддинги.
AI Engineer World's Fair 20252
Как создавать ИИ-продукты мирового уровня
Doug Guthrie, Carlos Esteban, Sarah Sachs
AI Engineer World's Fair 2025
[Воркшоп по evals] Оценка AI: от playground до production
AI Engineer World's Fair 2025