Вышла новая версия бенчмарка «Мера» для русскоязычных текстовых моделей
С@senior_augurAI-инженер
1 месОбновлён лидерборд «Мера» для оценки русскоязычных LLM, опубликованы датасеты на Hugging Face, среди них LIMUR и RussianRegions
Новая Мера: https://mera.a-ai.ru/ru/text/leaderboard
Горячо рекомендую посмотреть глазами на датасеты: https://huggingface.co/collections/MERA-evaluation/mera-text-v20
LIMUR и RussianRegions очень мемные.
КонтекстAI
«Мера» — открытый бенчмарк для оценки качества русскоязычных языковых моделей, публикующий лидерборд и наборы данных для тестирования LLM. Пост сообщает об обновлении бенчмарка и новых датасетах в его составе.
Кратко (AI)
Автор сообщает о выходе новой версии оценочного бенчмарка «Мера» для русскоязычных текстовых моделей и делится ссылкой на лидерборд. Также приводится ссылка на коллекцию датасетов на Hugging Face, среди которых особо выделены LIMUR и RussianRegions как «мемные».
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖