返回全部动态

OpenCompass v0.5.3 发布:新增基准、API 支持与评估增强

原标题:0.5.3

OpenCompass Releases一手来源产品发布质量 81

AI 摘要

OpenCompass 发布 v0.5.3 版本,新增了 AIME2026、HMMT Feb 2026、SimpleQA-Verified 等多个基准测试和数据集支持,并引入 RawPromptTemplate 以增强提示模板的灵活性。同时,该版本新增了对 OpenAI Responses API、Gemini SDK API 和 Claude SDK 思考内容的支持,并改进了并发推理、重复分析等评估基础设施。这些更新旨在提升评估的覆盖范围和鲁棒性。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

# OpenCompass v0.5.3 Release Notes ## 🌟 **Highlights** ✨ **🧪 Extensive New Benchmarks and Dataset Support**: Added support for a wide range of new benchmarks and datasets, including **AIME2026**, **HMMT Feb 2026**, **SimpleQA-Verified**, **AdvancedIF**, **HLE-Verified**, **MRCR-V2**, **Molecular-IQ**, **SciReasoner 1.5**, **MP20**, **PerspectiveGap**, **ZebraLogic**, **ArxivRollBench**, **CL-Bench**, and more. ✨ **🧩 RawPromptTemplate Support**: Introduced **RawPromptTemplate** and exp


发布时间:2026-06-29 11:17
抓取时间:2026-08-31 00:41
来源机构:Shanghai AI Laboratory
阅读原文github.com