OpenCompass

OpenCompass是什么

OpenCompass是上海人工智能实验室（上海AI实验室）于2023年8月正式推出的大模型开放评测体系，通过完整开源可复现的评测框架，支持大语言模型、多模态模型各类模型的一站式评测，并定期公布评测结果榜单。OpenCompass包含 CompassKit（评估工具包）、CompassHub（基准社区）和 CompassRank（评估排行榜）三大核心部分。OpenCompass支持多种模型（如 Hugging Face 模型、API 模型等），涵盖语言、知识、推理等八大能力维度，提供零样本、少样本等多种评估方法。OpenCompass具备分布式高效评估、灵活扩展等特点，已吸引众多知名企业和高校合作，致力于推动大模型评估的标准化和规范化发展。