工具概览
LMSYS Chatbot Arena 排行榜是一个基于真实用户偏好的大模型评测平台,通过“人类对战投票”而不是传统合成测评来排序各类大语言模型(LLM)。用户同时与两个匿名模型对话,只需选择回答更好的那一方,即可形成一条真实的对比数据。平台利用超过百万条人工成对比较记录,结合 Bradley–Terry 统计建模与 Elo 评分体系,为开源与商用模型生成稳定可靠的综合排名。
排行榜覆盖聊天问答、代码生成、逻辑推理、写作创作等多种场景,帮助研究者、开发者和产品团队客观了解不同模型的实际表现,用于选型、对比新版本以及追踪模型能力演进。随着持续新增的对战数据和模型版本,排行榜能够动态反映行业最新进展,而不是一组静态的单次测分结果。
LMSYS Chatbot Arena 排行榜完全免费,通过网页即可访问,让个人用户、小团队和企业都能方便获取一线大模型评测信息。无论你是要为产品选型、验证自研模型能力,还是单纯想看看各家聊天机器人“谁更强”,这里都提供了基于大规模人类偏好的公开、公正参考。
LMArena 文本榜
基于 LMArena Chatbot Arena 真人盲测投票 + Bradley–Terry / Elo 算法的当前 Top 10 大模型。点击模型名查看 ToolHub 上对应的家族页;旁边 ↗ 图标跳官方页面。
| # | 模型 | Elo 分数 |
|---|---|---|
| 1 | Anthropic | 1509 |
| 2 | Anthropic | 1504 |
| 3 | Anthropic | 1502 |
| 4 | Anthropic | 1499 |
| 5 | Anthropic | 1494 |
| 6 | Meta | 1487 |
| 7 | 1486 | |
| 8 | 1486 | |
| 9 | Anthropic | 1484 |
| 10 | OpenAI | 1481 |
- 第 1 到第 10 的 Elo 差距只有 28 分。10 分以内的差距在统计上往往不显著——前 10 基本是一个梯队,差异更多体现在 擅长场景和成本,而不是“谁更聪明”。
- 按任务挑模型,不要按总榜挑:写代码 / 重构 / 长文档分析优先 Claude; 日常通用 + 语音 + 图像优先 ChatGPT; Workspace 集成 / 多模态优先 Gemini; 自部署 / 免费首选 Meta AI / Llama。
- “thinking” 变体值不值得用?带 thinking 后缀的模型在硬推理上更强,但延迟和成本明显更高。日常对话用普通版, 遇到棘手编程 / 数学 / 多步推理再切到 thinking 版。
- 本表只看文本榜。编程实战、网页搭建、视觉理解、长上下文各有专门子榜—— 访问官方 LMArena 查 WebDev、Vision、Coding 等分项。
定价
价格与限制可能变化,请以官网为准,并确认币种、付款周期、最低席位数和用量上限。
应用场景
- 产品与应用模型选型:根据排行榜对比主流大模型表现,为客服机器人、智能助手、生成创作等场景挑选更合适的底层模型。
- 科研与研发效果验证:将 Arena 排名视作人类偏好基线,用于评估新模型、微调版本或提示工程方案的实际改进幅度。
- 市场与竞品能力洞察:持续关注开源与商用模型在榜上的变化趋势,为技术路线规划、供应商选择和迁移决策提供依据。
功能特性
基于真实用户投票评测
Elo 风格大模型评分体系
Bradley–Terry 统计排名模型
双模型匿名对话对战体验
汇总开源与商用模型表现
排行榜数据持续滚动更新
完全免费网页版评测入口
按任务类型细分能力洞察
用户评论
还没有评论,来分享你的使用体验吧
常见问题
什么是 LMSYS Chatbot Arena 排行榜?
LMSYS Chatbot Arena 排行榜是一个免费开放的平台,通过超过一百万条用户对战投票数据,对各类大语言模型进行排序,并使用 Bradley–Terry 模型和 Elo 评分来给出更贴近真实使用场景的综合表现排名。
排行榜上的模型分数和名次是如何计算的?
平台收集用户在双模型匿名对战中“选出更好回答”的结果,将这些成对比较输入 Bradley–Terry 统计模型,并转换为类似 Elo 的评分体系,从而在众多模型和任务之间构建可比、统一的排名。
使用 LMSYS Chatbot Arena 排行榜需要付费吗?
不需要。排行榜通过网页免费开放,你可以直接查看模型排名和详情,并参与对战评测,无需订阅或支付任何费用。
我可以用排行榜为自己的产品选择大模型吗?
可以。很多开发者和团队都会参考排行榜进行模型选型。实际落地时仍需结合业务领域、延迟、成本、安全等因素综合评估,但 Arena 的人类偏好评分是非常有价值的起点。
我可以把自己的模型接入平台进行评测吗?
LMSYS 会不定期在 Arena 中加入新模型。如果你维护自己的大语言模型并希望参与评测,可以通过 LMSYS 官网或 GitHub 上的官方文档和提交流程,提出接入申请。