CFO OpenAI предложила систему оценки эффективности ИИ по четырём метрикам

CFO OpenAI Сара Фрайер представила подход к оценке отдачи от внедрения ИИ через набор прикладных показателей. В основе системы лежат объём полезной работы, стоимость успешно выполненной задачи, надёжность и отдача на вычислительные ресурсы.

Как сообщает OpenAI News, предложенный scorecard сфокусирован на измерении реального эффекта от использования ИИ, а не только технических характеристик моделей. Предполагается, что такой подход поможет компаниям сравнивать эффективность ИИ-инструментов по показателям, связанным с затратами, качеством выполнения задач и использованием вычислительной мощности.