Платформа для оценки AI-моделей Arena сообщила, что годовой регулярный доход корпоративного сервиса AI Evaluations превысил 100 млн $. Продукт запустили восемь месяцев назад, он работает по подписочной модели с предсказуемой повторяющейся выручкой. Как сообщает IT Home, компания планирует и дальше инвестировать в платформу Arena, а также расширять набор инструментов для тестирования моделей и AI-совместной работы.
Arena выросла из исследовательского проекта LMArena, который появился в 2023 году в Калифорнийском университете в Беркли. Сначала проект строился вокруг бесплатного сравнения ответов AI-моделей обычными пользователями. Собранные данные использовали для формирования рейтинга моделей, и со временем этот рейтинг стал одним из ориентиров для оценки возможностей больших моделей в индустрии.
В апреле 2025 года Arena завершила переход к полноценной корпоративной структуре. Уже в сентябре того же года компания представила бизнесу коммерческий продукт AI Evaluations. Сервис использует обратную связь от реальных пользователей для оценки работы моделей в прикладных сценариях. Кроме того, платформа предоставляет тестовые выборки с возможностью отслеживать результаты и SLA.
При этом рынок AI-оценки по-прежнему остается нестабильным. Платформа Yupp, основанная в 2024 году, прекратила работу 31 марта этого года. Компания заявляла, что привлекла более 1,3 млн пользователей и получила контракты от части AI-лабораторий, но так и не смогла достичь достаточного product-market fit для устойчивого развития.
Ключевые факты
Годовой регулярный доход сервиса AI Evaluations превысил 100 млн $ через 8 месяцев после запуска
Arena выросла из проекта LMArena, запущенного в 2023 году в Калифорнийском университете в Беркли
В апреле 2025 года Arena завершила корпоративную реорганизацию, а в сентябре представила бизнес-сервис AI Evaluations
Платформа Yupp прекратила работу 31 марта, несмотря на аудиторию более 1,3 млн пользователей