Überblick
Das LMSYS Chatbot Arena Leaderboard bewertet große Sprachmodelle (LLMs) anhand menschlicher Präferenzen statt anhand synthetischer Benchmarks. Nutzer chatten parallel mit zwei anonymen Modellen und stimmen für die bessere Antwort ab. Aus über einer Million solcher Vergleiche erstellt die Plattform mithilfe des Bradley–Terry-Modells und Elo-ähnlicher Bewertungen eine statistisch fundierte Rangliste offener und proprietärer LLMs.
Das Leaderboard zeigt die Leistung der Modelle bei Aufgaben wie Programmieren, logischem Denken, Schreiben und allgemeinen Gesprächen. Forschende, Entwickler und Produktteams können damit Modelle auswählen, neue Versionen vergleichen und die Entwicklung von LLMs verfolgen. Neue Vergleiche und Modelle fließen fortlaufend ein.
Das LMSYS Chatbot Arena Leaderboard ist kostenlos im Web verfügbar. Es bietet eine von der Community getragene Orientierung für die Modellauswahl, die Bewertung eigener LLMs und den Vergleich führender Chatbots.
LMArena Text Leaderboard
Top 10 LLMs by current Elo / Bradley–Terry scores from LMArena human-preference battles. Click a model name to see its ToolHub family page; ↗ links to the official source.
| # | Model | Elo Score |
|---|---|---|
| 1 | Anthropic | 1509 |
| 2 | Anthropic | 1504 |
| 3 | Anthropic | 1502 |
| 4 | Anthropic | 1499 |
| 5 | Anthropic | 1494 |
| 6 | Meta | 1487 |
| 7 | 1486 | |
| 8 | 1486 | |
| 9 | Anthropic | 1484 |
| 10 | OpenAI | 1481 |
- Elo gap from #1 to #10 is just 28 points.Differences under ~10 points are often within noise — treat the entire top 10 as one tier and pick by task fit and cost, not by who’s “smartest” on this single chart.
- Pick by task, not by overall rank:coding, refactoring, and long-document analysis → Claude; general utility + voice + image → ChatGPT; Workspace integration + multimodal → Gemini; self-hosted or zero-cost → Meta AI / Llama.
- Are “thinking” variants worth it? Thinking models excel at hard reasoning but cost more latency and tokens. Use the regular variant by default; switch to thinking only for tough coding, math, or multi-step problems.
- This is the Text leaderboard only. Coding battles, web dev, vision understanding, and long context each have their own sub-arena — see WebDev / Vision / Coding tabs on the official LMArena site.
Preise
Kostenlos
Detaillierte Tarife wurden im Katalog noch nicht bestätigt. Aktuelle Limits und Abrechnungsbedingungen finden Sie auf der offiziellen Website.
Website besuchenPreise und Limits können sich ändern. Prüfen Sie Währung, Abrechnungszeitraum, Mindestanzahl der Nutzer und Nutzungslimits auf der offiziellen Website.
Anwendungsfälle
- Modellauswahl für Produkte und Apps: Führende LLMs vergleichen, um ein Modell für Chatbots, Copilots und Content-Tools auszuwählen.
- Benchmarking in Forschung und Entwicklung: Arena-Ranglisten als Maßstab für menschliche Präferenzen nutzen, um neue Modelle, Feinabstimmungen oder System-Prompts zu prüfen.
- Markt- und Wettbewerbsanalyse: Die Entwicklung offener und kommerzieller LLMs verfolgen, um Strategien, Partnerschaften oder Migrationspläne zu beurteilen.
Funktionen
Modellvergleiche durch Nutzer
Elo-ähnliche Leistungsbewertungen für LLMs
Statistische Rangliste nach Bradley–Terry
Anonyme Chatduelle im direkten Vergleich
Gemeinsame Übersicht offener und proprietärer Modelle
Fortlaufend aktualisierte Ranglistendaten
Kostenloser Zugang zur webbasierten Bewertung
Detaillierte Einblicke nach Aufgabentyp
Bewertungen
Noch keine Bewertungen. Teilen Sie als Erste(r) Ihre Erfahrung!
Häufige Fragen
What is LMSYS Chatbot Arena Leaderboard?
LMSYS Chatbot Arena Leaderboard is a free, crowdsourced platform that ranks large language models based on over one million human pairwise comparisons, using the Bradley–Terry model and Elo-style ratings to provide robust, real-world performance rankings.
How are the model scores and rankings calculated?
Scores are derived from human pairwise comparisons where users choose which of two anonymous models responds better. These outcomes are fed into the Bradley–Terry statistical model and converted to Elo-style ratings, producing a consistent ranking across many models and tasks.
Is LMSYS Chatbot Arena Leaderboard free to use?
Yes. The leaderboard is completely free to access in your browser. You can view rankings, inspect model details, and participate in chat battles without any subscription fees.
Can I use the leaderboard to choose a model for my product?
Yes. Many developers and teams use the leaderboard as a human-centric reference when selecting LLMs. You should still consider your specific domain, latency, cost, and safety needs, but Arena ratings provide a strong starting point.
Can I submit or benchmark my own model?
LMSYS periodically adds new models to the Arena. If you maintain an LLM and want it evaluated, you can follow the official documentation and submission channels on the LMSYS website or GitHub to request inclusion.