AI模型评测

OpenCompass

OpenCompass(司南)是上海人工智能实验室推出的大模型开源评测体系,提供覆盖学科知识、语言、推理等多维度能力的评测基准与公开排行榜。它支持主流开源与商用模型的统一评测,适合模型研发团队做能力对比与选型参考,也方便研究者跟踪大模型进展。

标签:
OpenCompass 把大模型评测做成了一套可复用的开源工具链:它汇集了大量主流评测基准,从学科知识、语言理解到数学推理、代码能力等维度给模型打分,并把各家模型的成绩汇总成公开排行榜,用统一口径横向呈现。评测框架本身开源,团队可以把自己的模型接进来跑分,也能自定义数据集和评测维度,复现榜单结果。 它适合正在研发或选型大模型的团队,用来在发布前摸清模型在各维度上的强弱项,也适合研究者和技术媒体跟踪不同模型的真实能力变化。对于普通读者,排行榜是快速了解一款新模型定位的参考入口;但和所有基准一样,分数更适合当作选型维度之一,而不是判断模型好坏的唯一标准。
©️版权声明:若无特殊声明,本站所有文章版权均归AI工具集原创和所有,未经许可,任何个人、媒体、网站、团体不得转载、抄袭或以其他方式复制发表本站内容,或在非我站所属的服务器上建立镜像。否则,我站将依法保留追究相关法律责任的权利。

类似网站