SuperCLUE:中文大模型基准测评2025年5月报告.docxVIP

SuperCLUE:中文大模型基准测评2025年5月报告.docx

  1. 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
  2. 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  3. 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  4. 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  5. 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  6. 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  7. 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多

中文大模型基准测评2025年5月报告

—2025中文大模型阶段性进展5月评估

SuperCLUE团队2025.05.28

精准量化通用人工智能(AGI)进展,定义人类迈向AGI的路线图

AccuratelyquantifyingtheprogressofAGI,

definingtheroadmapforhumanitysjourneytowardsAGI.

报告目录

报告目录

一、2025上半年度关键进展及趋势

1.2025年上半年大模型关键进展

2.2025年最值得关注的中文大模型全景图

3.2025年国内外大模型差距

二、5月通用测评介绍

1.SuperCLUE基准介绍

2.SuperCLUE大模型综合测评体系

3.SuperCLUE通用测评基准数据集及评价方式

4.各维度测评说明及示例

5.测评模型列表

三、总体测评结果与分析

1.SuperCLUE模型象限

2.SuperCLUE通用能力测评榜单

3.SuperCLUE-Agent:智能体测评分析

4.SuperCLUE性价比区间分布

5.SuperCLUE大模型综合效能区间分布

6.国内大模型成熟度-SC成熟度指数

7.评测与人类一致性验证

8.开源模型榜单

9.10B级别小模型榜单

10.端侧5B级别小模型榜单

报告摘要(一)

?o4-mini(high)总分稳居第一,综合能力全面领先

o4-mini(high)在本次5月测评中表现优异,总分达到70.51分,超过国内最好模型7.35分。该模型在推理、代码生成、智能体、指令遵循等多个方面表现出卓越的综合能力,特别是在代码生成(91.52)、指令遵循(68.07)方面得分较高。

?国内推理模型崭露头角,部分领域优势突出

Doubao-1.5-thinking-pro-205415、SenseNovaV6Reasoner等国内模型表现亮眼。其中,Doubao-1.5-thinking-pro-205415在文本创作与理解任务以81.04的高分领先其他模型。

?国内大模型在指令遵循方面普遍低于海外模型

Hunyuan-T1国内模型中指令遵循得分第一,为36.97分,但是与海外模型指令遵循得分第一的o4-mini(high)相比,差距达到了31.1分,国内模型在指令遵循方面表现较弱,还有较大的提升空间。

?小参数模型表现超出预期

3多款开源小参数量模型展现出惊人潜力。尤其是Qwen3系列,其中4B、8B和14B版本在推理任务上的分数均超过50分,超越了众多闭源大模型。

3

报告摘要(二)

大模型性价比区间分布

数据来源:SuperCLUE,2025年5月28日;

模型推理速度选取5月测评中具有公开API的模型。平均推理时间为所有测评数据推理时间的平均值(秒)。推理任务得分为推理任务总分:数学推理、科学推理和代码生成的平均分。

数据来源:SuperCLUE,2025年5月28日;推理任务得分为推理任务总分:数学推理、科学推理和代码的平均分。开源模型如Qwen3-32B(Thinking)使用方式为API,价格信息均来自官方信息。

注:部分模型API的价格是分别基于输入和输出的tokens数量确定的。这里我们依照输入tokens与输出

tokens3:1的比例来估算其整体价格。价格信息取自官方在5月的标准价格(非优惠价格)。

4大模型推理效能区间分布

4

第一部分

2025上半年度关键进展及趋势

1.2025年上半年大模型关键进展

2.2025年最值得关注的中文大模型全景图3.2025年国内外大模型差距

2025上半年大模型关键进展

u自2022年11月30日ChatGPT发布以来,AI大模型在全球范围内掀起了有史以来规模最大的人工智能浪潮。国内外AI机构在过去2年半有了实质性的突破。具体可分为:准备期、跃进期、繁荣期、深化期和融合期。

SuperCLUE:AI

您可能关注的文档

文档评论(0)

4A方案 + 关注
实名认证
服务提供商

擅长策划,|商业地产|住房地产|暖场活动|美陈|圈层活动|嘉年华|市集|生活节|文化节|团建拓展|客户答谢会

1亿VIP精品文档

相关文档