OpenCompass 司南
免费上海 AI 实验室更新于 2026-07上海 AI 实验室的开源评测体系,多维度给大模型跑分。
免费额度与收费
榜单公开可查;评测框架在 GitHub 以 Apache-2.0 许可开源,可自行下载在本地跑评测,不收费。
完整入口
- 官网
- opencompass.org.cn ↗司南评测体系主站
- 评测榜单 CompassRank
- rank.opencompass.org.cn ↗开源与闭源模型的排行榜
- GitHub 仓库
- github.com/open-compass/opencompass ↗评测框架本体,Apache-2.0 许可
- 大陆访问
- 上海人工智能实验室的境内服务,可直接访问
背后的模型
司南榜单同时收录开源与闭源模型,而评测框架开源意味着你能拿它去测自己部署的开源权重模型;想先看有哪些开源模型可选、各自多大多贵,可对照本站的切片。
怎么用
上海 AI 实验室的开源评测体系,多维度跑分。适合要透明、可复现基准的研究者;开源可自行搭评测。
OpenCompass 司南由上海人工智能实验室推出,和只发榜单的评测站不一样的地方在于:它把评测工具本身也开源了。仓库以 Apache-2.0 许可放在 GitHub 的 open-compass/opencompass,支持 70 多个数据集、约 40 万道题目,你可以把它拉到本地,用同一套流程去测自己微调出来的模型——这对企业内部选型和复现榜单结果都有实际意义。
司南 2.0 由三个模块组成:CompassRank(榜单,同时收录开源与闭源模型)、CompassHub(基准数据集的浏览与检索入口)、CompassKit(面向大语言模型和多模态模型的评测工具集)。评测维度覆盖知识、语言、理解、推理、考试等方向,后续还扩到了 AI 计算系统、具身智能、安全可信与垂直行业应用。
容易搞混的一点:opencompass.org.cn 是官网主站,而榜单在二级域名 rank.opencompass.org.cn 上,直接搜「OpenCompass 榜单」可能落到主站首页。另外司南还联合魔搭社区做过 Compass Arena 这类对战形式的评测,和跑分榜是两条并行的线。
常见问题
OpenCompass 司南官网是什么?
主站是 opencompass.org.cn,评测榜单 CompassRank 在 rank.opencompass.org.cn,开源评测框架在 GitHub 的 open-compass/opencompass 仓库。
OpenCompass 是谁做的?
上海人工智能实验室。评测框架在 GitHub 以 Apache-2.0 许可开源,由该实验室及社区贡献者维护。
OpenCompass免费吗?
免费。榜单公开可查,评测框架开源可自行下载使用。面向企业的合作评测另有司南合作伙伴计划,以官网说明为准。
OpenCompass 和 SuperCLUE 有什么区别?
OpenCompass 司南出自上海人工智能实验室,把评测框架本身开源了,你可以在本地跑同一套评测流程;SuperCLUE 出自 CLUE 团队,以发布中文基准榜单为主。两者都以中文场景为重点,但 OpenCompass 的工具链属性更强。