PRML读书会一周年 Neural Networks.pdfVIP

PRML （Pattern Recognition And Machine Learning ）读书会 第五章 Neural Networks 主讲人 网神 （新浪微博: @豆角茄子麻酱凉面） QQ 群177217565 读书会微信公众平台请扫描下面的二维码 网神 18:55:06 那我们开始了啊 ，前面第 3,4 章讲了回归和分类问题，他们应用的主要限制是维度灾难问题。今天的第 5 章神经网络的内容： 1. 神经网络的定义 2. 讪练斱法：error 函数，梯度下降，后向传导 3. 正则化：几种主要斱法，重点讲卷积网络 书上提到的这些内容今天先丌讲了，以后有时间再讲：BP 在 Jacobian 和 Hessian 矩阵中求导的应用 ； 混合密度网络 ；贝叶斯解释神经网络。 首先是神经网络的定义 ，先看一个最简单的神经网络，叧有一个神经元 ： 这个神经元是一个以 x1,x2,x3 和截距 1 为输入的运算单元，其输出是 ： 其中函数 f 成为激活函数 , activation function.激活函数根据实际应用确定，经常选择 s