LM Arena (Chatbot Arena)

Description

LM Arena, также известная как Chatbot Arena, — это open-source платформа, разработанная LMSYS и UC Berkeley SkyLab для продвижения развития и понимания больших языковых моделей через живые, прозрачные и основанные на сообществе оценки. Платформа позволяет пользователям взаимодействовать и сравнивать несколько LLM в анонимных баттлах, собирая голоса для ранжирования моделей с помощью системы Elo. Поддерживается широкий спектр общедоступных моделей, включая open-weight и коммерческие API, а лидерборд постоянно обновляется на основе реальных отзывов пользователей. LM Arena делает акцент на прозрачности, открытой науке и сотрудничестве, открыто публикуя датасеты, инструменты оценки и инфраструктуру на GitHub.