2025大模型原理、技术与应用：从GPT到DeepSeek-哈尔滨工业大学-2025.2-.pdfVIP

大模型原理、技术与应用

从GPT到DeepSeek

从GPT到DeepSeek

车万翔

哈工大计算学部人工智能学院

社会计算与交互机器人研究中心（HIT-SCIR）

2025年2月28日

为什么是语言？

大模型又称大语言模型（LargeLanguageModels）

语言是人类交流思想、表达情感最自然、最深刻、最方便的工具

“语言是继真核细胞之后最伟大人类历史上大部分知识是以

的进化成就”

——社会生物学之父爱德华·威尔逊语言文字形式记载和流传的

“语言本身就是人类有史以来最

大的技术发明”

——詹姆斯·格雷克《信息简史》

什么是自然语言处理？

自然语言指的是人类语言，特指文本符号，而非语音信号

◼自然语言处理（NaturalLanguageProcessing，NLP）用计算机来理解和生成自然语言的各种理论和方法

◼属于认知智能是人类和动物的主要区别之一需要更强的抽象和推理能力

运算智能感知智能认知智能

能存储会计算能听会说能看会认能理解会思考

“自然语言处理是人工智能皇冠上的明珠”

自然语言处理成为制约人工智能取得更大突破和更广泛应用的瓶颈

“深度学习的下一个大的进展应该是“深度学习的下一个前沿课题是

让神经网络真正理解文档的内容”自然语言理解”

——诺贝尔奖得主、图灵奖得主、——图灵奖得主、MetaAI负责人

深度学习之父GeoffreyHintonYannLeCun

“如果给我10亿美金，我会建造一个

“下一个十年，懂语言者得天下”

NASA级别的自然语言处理研究项目”

——美国工程院士、微软前全球执行

——美国双院院士、世界知名机器学习专家

副总裁沈向洋

MichaelI.Jordan

自然语言处理的发展历史

自然语言处理技术已经经历了五次范式变迁

浅层机器学习算法

小规模专家知识1990~2010

1950~1990

预训练语言模型

深度学习