LMSys Org est une organisation visant à démocratiser l'accès aux grands modèles et à leurs infrastructures systèmes. Elle a développé le chatbot Vicuna, capable d'égaler GPT-4 aux tailles 7B/13B/33B, atteignant 90% de la qualité de ChatGPT. Elle propose également Chatbot Arena, une plateforme d'évaluation massive et ludique des LLM par crowdsourcing et système de classement Elo. SGLang fournit une interface et un environnement d'exécution efficaces pour les programmes LLM complexes. LMSYS-Chat-1M est un vaste jeu de données de dialogues LLM réels. FastChat est une plateforme ouverte pour l'entraînement, le déploiement et l'évaluation de chatbots basés sur les LLM. MT-Bench est un ensemble de questions ouvertes, multi-tours et stimulantes pour l'évaluation des chatbots.