深度学习与神经网络技术手册.docx

深度学习与神经网络技术手册

深度学习与神经网络技术手册

第一章深度学习基础架构与核心原理

第一节神经网络的基本数学模型

神经网络的核心在于其由大量神经元通过加权连接构成的计算图,其输入向量$X$与输出向量$Y$的关系可形式化表示为$Y=f(WX+b)$,其中$W$为权重矩阵,$b$为偏置向量,$f$为激活函数,$f$表示$f$关于输入$x$的导数。这种线性变换的组合构成了神经网络的底层骨架,是后续所有算法推导的基石。为了将原始数据映射到神经网络能够处理的非线性空间,必须引入非线性激活函数。常用的激活函数包括Sigmoid函数$\sigma

文档评论(0)

1亿VIP精品文档

相关文档