原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
梁斌Penny/2025年2月/南京
文科生听懂大模型
DemystifyingLargeModels：
AnAccessibleCourseforLiberalArtsStudents
我们的课程就讲这一张图
课程目录
010203
【引子1】【引子2】【第一课】
神经网络TransformerTransformer架构
输入和输出
PARTONE
【引子1】
神经网络
01【引子1】神经网络
神经网络是什么？为什么神经网络能产生智能？
1）任何事物都能被数字化。
2）任何复杂的函数都可以被神经网络表达，哪怕没有显示解析式。
01【引子1】神经网络
神经网络基本原理权重是神经元用来衡量输入信号重要性的参数。
每个输入信号都有一个对应的权重，权重越大，
神经元概念解释这个信号对最终输出的影响就越大。
权重(Weight)，偏置(Bias)，
激活函数（ActiveAction）偏置是一个常数项，用来调整神经元的输出。
它的作用是让神经元在没有输入信号时也能有
一个基础的输出值。偏置可以帮助神经元更容
易地被激活或抑制。
激活函数是神经元用来决定是否将信号传递下
去的“开关”。它将神经元的加权输入（权重×输
入+偏置）转换为一个非线性的输出。激活函数
的作用是引入非线性，让神经网络能够处理复
杂的任务。
01【引子1】神经网络
神经网络基本原理
梯度、反向传播的几个概念解释
学习率的理解（/）
01【引子1】神经网络
详解梯度
梯度是一个向量（是损失函数在每个变量上的偏导数构成），损失函数
的正梯度是往损失函数变大方向走，负梯度是往损失函数变小方向走。
01【引子1】神经网络
AutoEncode
AutoEncoder是一个利用学习一个F(x)→x的函数，一层层
压缩得到目标信息的一个压缩表示（见图3）
受限玻尔兹曼机
01【引子1】神经网络
AutoEncode训练过程
训练误差Error防止过拟合
L1/L2正则化，通过在损失函数中添加正
则化项来限制参数的大小。
用这个方式来调整参数（加或者减）Dropout，随机放弃神经元参与计算，以
来逐步降低训练误差。
文档评论（0）