- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
中文大模型基准测评2025年5月报告
—2025中文大模型阶段性进展5月评估
SuperCLUE团队2025.05.28
精准量化通用人工智能(AGI)进展,定义人类迈向AGI的路线图
AccuratelyquantifyingtheprogressofAGI,
definingtheroadmapforhumanitysjourneytowardsAGI.
报告目录
报告目录
一、2025上半年度关键进展及趋势
1.2025年上半年大模型关键进展
2.2025年最值得关注的中文大模型全景图
3.2025年国内外大模型差距
二、5月通用测评介绍
1.SuperCLUE基准介绍
2.SuperCLUE大模型综合测评体系
3.SuperCLUE通用测评基准数据集及评价方式
4.各维度测评说明及示例
5.测评模型列表
三、总体测评结果与分析
1.SuperCLUE模型象限
2.SuperCLUE通用能力测评榜单
3.SuperCLUE-Agent:智能体测评分析
4.SuperCLUE性价比区间分布
5.SuperCLUE大模型综合效能区间分布
6.国内大模型成熟度-SC成熟度指数
7.评测与人类一致性验证
8.开源模型榜单
9.10B级别小模型榜单
10.端侧5B级别小模型榜单
报告摘要(一)
?o4-mini(high)总分稳居第一,综合能力全面领先
o4-mini(high)在本次5月测评中表现优异,总分达到70.51分,超过国内最好模型7.35分。该模型在推理、代码生成、智能体、指令遵循等多个方面表现出卓越的综合能力,特别是在代码生成(91.52)、指令遵循(68.07)方面得分较高。
?国内推理模型崭露头角,部分领域优势突出
Doubao-1.5-thinking-pro-205415、SenseNovaV6Reasoner等国内模型表现亮眼。其中,Doubao-1.5-thinking-pro-205415在文本创作与理解任务以81.04的高分领先其他模型。
?国内大模型在指令遵循方面普遍低于海外模型
Hunyuan-T1国内模型中指令遵循得分第一,为36.97分,但是与海外模型指令遵循得分第一的o4-mini(high)相比,差距达到了31.1分,国内模型在指令遵循方面表现较弱,还有较大的提升空间。
?小参数模型表现超出预期
3多款开源小参数量模型展现出惊人潜力。尤其是Qwen3系列,其中4B、8B和14B版本在推理任务上的分数均超过50分,超越了众多闭源大模型。
3
报告摘要(二)
大模型性价比区间分布
数
数据来源:SuperCLUE,2025年5月28日;
模型推理速度选取5月测评中具有公开API的模型。平均推理时间为所有测评数据推理时间的平均值(秒)。推理任务得分为推理任务总分:数学推理、科学推理和代码生成的平均分。
数据来源:SuperCLUE,2025年5月28日;推理任务得分为推理任务总分:数学推理、科学推理和代码的平均分。开源模型如Qwen3-32B(Thinking)使用方式为API,价格信息均来自官方信息。
注:部分模型API的价格是分别基于输入和输出的tokens数量确定的。这里我们依照输入tokens与输出
tokens3:1的比例来估算其整体价格。价格信息取自官方在5月的标准价格(非优惠价格)。
4大模型推理效能区间分布
4
第一部分
2025上半年度关键进展及趋势
1.2025年上半年大模型关键进展
2.2025年最值得关注的中文大模型全景图3.2025年国内外大模型差距
2025上半年大模型关键进展
u自2022年11月30日ChatGPT发布以来,AI大模型在全球范围内掀起了有史以来规模最大的人工智能浪潮。国内外AI机构在过去2年半有了实质性的突破。具体可分为:准备期、跃进期、繁荣期、深化期和融合期。
SuperCLUE:AI
您可能关注的文档
- 2025中国钢铁行业脱碳融资:转型金融试点和市场进展报告(英文版).docx
- 2025中国Serverless用户调查解读.docx
- 2025生活用纸品类电商白牌白皮书.docx
- 2025全球人工智能领域青年科学家分布与流动研究.docx
- 2025全球人工智能领域青年科学家分布与流动研究(中文).docx
- 2025年专业服务领域生成式人工智能报告.docx
- 2025年中国经济展望-英文版-BBVA.docx
- 2025年为可持续的美容和化妆品行业奠定基础白皮书.docx
- 2025年生成式人工智能与中小企业劳动力研究报告.docx
- 2025年迈向“零废弃”-北京丰泰中心的零废弃商业社区之路报告.docx
- 山东省潍坊市第一中学2012届高三阶段测试 基本能力试题.docx
- 山东省济宁市曲阜师大附中2010届九年级历史上学期期中质量检测试题人教版.docx
- 山东省济宁市2011届高三教学质量监测历史试题.docx
- 山东省枣庄市薛城实验中学2015届高三上学期期末历史试题.docx
- 山东省济宁市微山县第一中学2015-2016学年高二语文入学检测考试试题.docx
- 山东省淄博市张店区湖田中学2014-2015学年七年级英语下学期期中学业水平检测试题.docx
- 云南省玉溪市峨山彝族自治县一中2025-2026学年高三上学期期中考试物理-学生用卷.pdf
- 广东省江门市新会区创新教育集团2025-2026学年部编版九年级历史上学期期中综合素养评价(含答案).pdf
- 长沙市岳麓实验高三期中考试历史-学生用卷.pdf
- 四川省宜宾市翠屏区2025--2026学年八年级上学期期中历史试题(含答案).pdf
原创力文档


文档评论(0)