【模式识别与人工智能】11-第二章-第一节-对数几率回归-建立模型.pptxVIP

第二章对数几率回归-建立模型模式识别与人工智能授课教师：栾声扬汇报人：孙浩

CONTENTSSigmoid函数1对数几率回归模型2

PART01Sigmoid函数

激活函数感知机1958年，美国心理学家FrankRosenblatt提出第一个可以自动学习权重的神经元模型，称为感知机。感知机模型的数学公式2.1.1Sigmoid函数

激活函数感知机图1感知机模型2.1.1Sigmoid函数

激活函数感知机感知机模型的数学公式 。激活函数为常见激活函数：阶跃函数与符号函数。2.1.1Sigmoid函数

激活函数感知机最简单的是单位阶跃函数（Unit-stepFunction）。定义2.1.1Sigmoid函数

激活函数Sigmoid函数Sigmoid函数也叫Logistic函数（对数几率函数）。定义2.1.1Sigmoid函数

激活函数Sigmoid函数2.1.1Sigmoid函数图2单位阶跃函数与对数几率

激活函数Sigmoid函数对求导2.1.1Sigmoid函数图3sigmoid函数图像与导函数图像

激活函数Sigmoid函数在输入 时，导数最大为0.25；当输入为正负无穷时，梯度趋于0，会发生梯度弥散。优点：平滑、易于求导。缺