AI‑агенты заметно усложнили нагрузку на системы инференса. По данным NVIDIA, у отрасли долго не было понятного стандарта, который позволял бы измерять, как такие системы работают в подобных условиях.
Для этой задачи используется Artificial Analysis AgentPerf (AA-AgentPerf), набор открытых мультивендорных бенчмарков. Они профилируют траектории, отражающие реальные задачи кодирования, с которыми сталкиваются AI‑агенты.
NVIDIA сообщает, что получила ведущий результат в agentic coding на первом бенчмарке для agentic AI, основанном на AA-AgentPerf.
Ключевые факты
NVIDIA заявила о ведущем результате в задачах агентного программирования на первом бенчмарке для agentic AI.
Artificial Analysis представила AgentPerf (AA-AgentPerf), первый открытый мультивендорный бенчмарк для оценки agentic AI.
AA-AgentPerf профилирует траектории, представляющие реальные задачи программирования, выполняемые AI‑агентами.
Бенчмарк предназначен для измерения производительности inference‑систем в условиях более сложных нагрузок, создаваемых AI‑агентами.