Цикл разработки агентов: офлайн и онлайн контуры
Доклад о концепции Agentic AI Engineer: автоматизация полного цикла разработки и эксплуатации AI-агентов через два контура — офлайн (спека → сборка → эвалы → оптимизация) и онлайн (мониторинг → диагностика → оптимизация). Главный вывод: чтобы масштабировать агентов, нужно автоматизировать цикл обратной связи, используя агентов-диагностов и оценщиков.
Разработка агентов — это цикл: спецификация, сборка, оценка, запуск, диагностика, оптимизация. Автоматизация…
Концепция и инструменты (evaluator, diagnostics) напрямую применимы для автоматизации разработки и поддержки AI-агентов в оркестрации: можно внедрить цикл eval-driven development для своих агентов, автоматизировать сбор и анализ трейсов, а также использовать подход со спекой для гибкой смены фреймворков.