OpenCompass 是什么
OpenCompass 司南是面向大模型开发者和使用者的评测平台与开源工具,提供榜单、评测集信息及可运行的评测流程。官方仓库文档说明可以把模型与数据集组合拆分成任务,并在本地或计算集群执行,以适应较大规模的对比。它适合需要了解评测设置、复现结果或建立内部测评的人,阅读榜单时应同时检查任务和配置。
适合谁,什么时候选
适合
适合模型评测与复现实验。
不优先选择
单看总分决定所有业务模型选择。
能力与限制
- 评测资源:提供语言及多模态榜单与评测集。
- 任务分配:支持拆分评测并配置运行器。
使用前留意
- 榜单结果只对应其数据集与设置。
怎样开始了解 OpenCompass
建议从下面的小任务开始;这是编辑建议,不是登录实测记录。
- 选择匹配业务的评测集。
- 固定模型和推理配置。
- 比较分项结果并记录环境。
使用条件
开源仓库可查;运行资源和模型许可需按具体组合确认。
来源与核验记录
官网元描述补以官方仓库 Efficient Evaluation 文档。
- 资料整理
- 2026-09-09 · 公开资料已核对
- 实际测试
- 未进行登录后的实际效果测评
选型与步骤属于编辑建议。公开资料核对不等于付费功能测试;价格、地区和账号权益以实际使用时为准。