OpenCompass 司南
免費上海 AI 實驗室更新於 2026-07上海 AI 實驗室的開源評測體系,多維度給大模型跑分。
免費額度與收費
榜單公開可查;評測框架在 GitHub 以 Apache-2.0 許可開源,可自行下載在本地跑評測,不收費。
完整入口
- 官網
- opencompass.org.cn ↗司南評測體系主站
- 評測榜單 CompassRank
- rank.opencompass.org.cn ↗開源與閉源模型的排行榜
- GitHub 倉庫
- github.com/open-compass/opencompass ↗評測框架本體,Apache-2.0 許可
- 大陸訪問
- 上海人工智慧實驗室的境內服務,可直接訪問
背後的模型
司南榜單同時收錄開源與閉源模型,而評測框架開源意味著你能拿它去測自己部署的開源權重模型;想先看有哪些開源模型可選、各自多大多貴,可對照本站的切片。
怎麼用
上海 AI 實驗室的開源評測體系,多維度跑分。適合要透明、可復現基準的研究者;開源可自行搭評測。
OpenCompass 司南由上海人工智慧實驗室推出,和只發榜單的評測站不一樣的地方在於:它把評測工具本身也開源了。倉庫以 Apache-2.0 許可放在 GitHub 的 open-compass/opencompass,支援 70 多個數據集、約 40 萬道題目,你可以把它拉到本地,用同一套流程去測自己微調出來的模型——這對企業內部選型和復現榜單結果都有實際意義。
司南 2.0 由三個模組組成:CompassRank(榜單,同時收錄開源與閉源模型)、CompassHub(基準資料集的瀏覽與檢索入口)、CompassKit(面向大語言模型和多模態模型的評測工具集)。評測維度覆蓋知識、語言、理解、推理、考試等方向,後續還擴到了 AI 計算系統、具身智慧、安全可信與垂直行業應用。
容易搞混的一點:opencompass.org.cn 是官網主站,而榜單在二級域名 rank.opencompass.org.cn 上,直接搜「OpenCompass 榜單」可能落到主站首頁。另外司南還聯合魔搭社群做過 Compass Arena 這類對戰形式的評測,和跑分榜是兩條並行的線。
常見問題
OpenCompass 司南官網是什麼?
主站是 opencompass.org.cn,評測榜單 CompassRank 在 rank.opencompass.org.cn,開源評測框架在 GitHub 的 open-compass/opencompass 倉庫。
OpenCompass 是誰做的?
上海人工智慧實驗室。評測框架在 GitHub 以 Apache-2.0 許可開源,由該實驗室及社群貢獻者維護。
OpenCompass免費嗎?
免費。榜單公開可查,評測框架開源可自行下載使用。面向企業的合作評測另有司南合作伙伴計劃,以官網說明為準。
OpenCompass 和 SuperCLUE 有什麼區別?
OpenCompass 司南出自上海人工智慧實驗室,把評測框架本身開源了,你可以在本地跑同一套評測流程;SuperCLUE 出自 CLUE 團隊,以釋出中文基準榜單為主。兩者都以中文場景為重點,但 OpenCompass 的工具鏈屬性更強。