Niklas Nielsen — соучредитель и CTO компании Log10, где создал платформу Everest для документации в клинических, регуляторных и других высокорисковых сферах life sciences. До этого работал над виртуальными машинами и компиляторами в Adobe и над распределёнными системами в Mesosphere и Intel. Он был коммиттером проекта Apache Mesos и руководил продуктом в MosaicML. В докладе на AI Engineer Summit 2023 он рассказал о llmeval, локальном Python-фреймворке для оценки LLM-приложений, и о проверке ответов с помощью моделей.
Темы докладов: Evals и бенчмарки.