Сад · Росток
Подключить DeepEval к CrewAI для трейсинга и метрик
«росток» · 2 карт. · 2 голос.(-а/-ов) корпуса · в пределах одного дня
статьяcrewaideepevalоценкаметрикитрейсингагенты
2 карточек корпуса (2 голос.(-а/-ов) с учётом повторов внутри карточки) независимо друг от друга подошли к одному и тому же действию, в пределах одного дня.
Как формулировали
- подключить DeepEval к CrewAI через instrument_crewai() и настроить CONFIDENT_API_KEY для трейсинга (2026-08-17)
- установить deepeval и crewai и вызвать instrument_crewai() после импорта (2026-08-17)
Источники
- Автоматическая оценка CrewAI-крю через DeepEval · 2026-08-17 · частично
- Одна строка instrument_crewai() включает трейсинг всех шагов агентов · 2026-08-17 · частично
Соседние темы
- Создать датасет с ожидаемыми ответами и прогнать через evals_iterator() — 1 общих карточек, 6 общих тега(ов)
- Вынести ключи и настройки в переменные окружения — 1 общих карточек, 5 общих тега(ов)
- Выносить настраиваемый параметр или правило в конфиг конвейера, а не хардкодить — 3 общих тега(ов)
- Настроить автоматическую оценку ответов агента: LLM-судью или эталонный набор вместо ручной проверки — 3 общих тега(ов)
- Настроить трассировку и логирование вызовов агента и токенов — 2 общих тега(ов)