Модель BerryLM-XL от Wildberries вошла в тройку лидеров русскоязычного бенчмарка MERA
Большая языковая модель BerryLM-XL, дообученная специалистами RWB, вошла в топ‑3 текстового рейтинга русскоязычного бенчмарка MERA. По итогам тестирования алгоритм получил интегральную оценку 0,835.
Как сообщает 3DNews, для сравнения используется эталонная оценка Human Benchmark. Ее сформировали на основе ответов людей на аналогичные вопросы, показатель составляет 0,852.
С таким результатом модель Wildberries оказалась в тройке лидеров рейтинга MERA среди решений, которые проверяли на текстовых задачах.
Ключевые факты
Большая языковая модель BerryLM-XL, дообученная специалистами RWB, вошла в топ-3 текстового рейтинга русскоязычного бенчмарка MERA.
По итогам тестирования модель BerryLM-XL получила интегральную оценку 0,835.
Эталонная оценка Human Benchmark на основе ответов людей на аналогичные вопросы составляет 0,852.