2024大语言模型综合能力测评报告.doc

大模型综合能力

测评报告2024

1

模型市场发展洞察

2

2023年，全球模型市场进爆发阶段

模型诞阶段

2017-2018年

在诞阶段，以Transformer为代表的全新神经络架构，奠定了模型的算法架构基础，使模型技术的性能得到了显著提升。

2017

6.12歌推出于处理然语任务的

Transformer神经络架构

2018

6.11OpenAI发布GPT-1

11.22歌推出BERT

模型探索阶段

2019-2021年

在探索期，基于类反馈的强化学习（RHLF）、代码预训练、指令微调等开始出现，被于进步提推理能和任务泛化。

2019

3.16百度推出可以准确理解语义的ERNIE1.0

8.21OpenAI发布GPT-2并部分开源

10.11歌推出BERT模型的两个新版本

RoBERTa和XLNet

2020

11.5OpenAI发布120亿参数图像版GPT-3

2021

1.16OpenAI推出能实现本成图像的DALL-E模型

4.25华为正式发布盘古模型

8.10OpenAI推出Codex

模型爆发阶段

2022-2023年

在爆发期，数据、算和算法完美结合，具备了多模态理解与多类型内容成能。

2022

? 11.30OpenAI推出ChatGPT

2023

?2.7歌发布Bard以应对ChatGPT

?4.11阿云发布通义千问

?2.20复旦团队发布MOSS

?5百度发布模型3.5

?2.23微软基于ChatGPT发布NewBing

?5.6科讯发布认知模型

?2.25FaceBook发布LLaMA-13B

?5.11歌更新Bard并推出PaLM

?3.14

OpenAI发布GPT-4并实现图像识别

2模型

?3.16

百度发布

?5.24微软宣布Windows系统全

?3.17微软宣布将GPT-4接Office全家桶

位集成Copilot

4.10昆仑万维发布天3.5

3

2023年中央及地政府积极制定政策励和规范模型产业发展

2023年，中央及地围绕基础设施、算法、算、数据等领域出台多项政策，坚持发展和安全并重、促进创新和依法治理相结合的原则，励和规范作为硬科技的AI模型产业发展。

序号

时间

件名

主要内容

1

2023年7

《成式智能服务管理暂办法》

明确了成式智能“提供者”内容产、数据保护、隐私安全等的法定责任及法律依据，

确了智能产品的安全评估规定及管理办法。

2

2023年7

《上海市推动智能模型创新发展的若措施》

推动上海模型创新发展，营造通智能创新态，加快打造世界级智能产业集群。

3

2023年8

《电信息制造业20232024年稳增动案》

励加数据基础设施和智能基础设施建设，满智能、模型应需求。

4

2023年10

《形机器创新发展指导意》

到2025年，形机器创新体系初步建，“脑、脑、肢体”等批关键技术取得突破，确

保核部组件安全有效供给，开发基于智能模型的形机器“脑”。

从模型全球发展态势、国内外业应概述、北京应情况和发展建议等进了系统分析

5

2023年11

《北京市智能业模型创新应书（2023年）》

和阐述，旨在进步推动模型应落地，展示北京市模型应成果，促进模型价值传播和

供需对接。

6

2023年11

东省《关于加快建设通智能产业创新引领地的实

22条举措打造国家通智能产业创新引领地。

施意》

7

2023年12

《关于加快推进视听电产业质量发展的指导意》

持企业做做强，持智能企业研发视听应模型。

《“数据要素x”三年动计划（2024—2026年）（征求意

以科学数据持模型开发，深挖掘包含科技献在内的各类科学数据，通过细粒度的知识抽

8

2023年12

取，构建科学知识资源底座，建设质量语料稿库和基础科学数据集，持开展通智能

稿）》

模型和垂直领域智能模型训练。

4

2023年下半年，中国百模战掀开序幕

01 02

2023年62023年8

2023年82023年10

?

6.14360发布智脑模型4.0

?

8

.3阿云推出开源Qwen-7B

?

6.15百川智能发布开源Baichuan-7B

?

8

.7元象科技发布开源XVERSE-13B