Как сообщает Google Developers Blog, сервис оценки в Agent Platform стал общедоступным. С его помощью можно последовательно измерять качество агентов и во время локальных экспериментов, и на реальном производственном трафике.
Разработчикам доступно более 20 готовых метрик, адаптивные критерии при поддержке DeepMind, а также собственные метрики на основе кода и метода LLM-as-a-judge. Все они хранятся в централизованном реестре с управлением версиями.
Сервис интегрируется в рабочие процессы через Agent Platform SDK, agents-cli и ADK. Встроенные симуляторы пользователей и окружения автоматизируют сложные многоходовые тесты и упрощают конвейеры CI.
Ключевые факты
Для оценки доступно более 20 готовых метрик.
Адаптивные критерии разработаны при поддержке DeepMind.
Собственные метрики на основе кода и метода LLM-as-a-judge хранятся в централизованном реестре с управлением версиями.
Встроенные симуляторы пользователей и окружения автоматизируют сложные многоходовые тесты.
Вопросы и ответы
- Как встроить оценку агентов в текущую разработку?
Сервис подключается через Agent Platform SDK, agents-cli и ADK, поэтому проверки можно включить в существующие рабочие процессы и CI-конвейеры.
- Какие метрики доступны команде?
Есть более 20 готовых метрик, адаптивные критерии, разработанные при поддержке DeepMind, а также собственные метрики на основе кода и LLM-as-a-judge.
- Что можно автоматизировать при тестировании?
Встроенные симуляторы пользователей и окружения запускают сложные многоходовые тесты, а результаты можно сопоставлять между локальными экспериментами и реальным производственным трафиком.
Контекст по теме
- Google получила статус лидера в оценке IDC MarketScape по ПО для foundation models14 июля 2026 г.
- Gemini API добавил фоновые задачи, интеграцию с удалёнными MCP-серверами и обновление credentials для Managed Agents7 июля 2026 г.
- Google Cloud представила полностью управляемый remote MCP server для Gemini Enterprise Agent Platform30 июня 2026 г.
- Google представила новые ИИ‑модели и инструменты для клиентов Google Cloud на Google I/O9 июня 2026 г.
