人工智能通识教程 课件 第04章-神经网络与深度学习.pptx

人工智能通识教程 课件 第04章-神经网络与深度学习.pptx

;课堂导入;主要内容;神经细胞利用电-化学过程交换信号;;;常见的激活函数包括:

阶跃函数:输出0或1,适用于早期感知机;

Sigmoid函数:输出0到1之间,常用于二分类,但易导致梯度消失;

分段线性函数:结构简单,能缓解梯度消失,是当前主流激活函数;

符号函数:输出+1或-1,早期用于二分类,现应用有限;

双曲正切函数(Tanh):输出-1到1之间,比Sigmoid更常用于隐藏层,但同样有梯度消失问题;

ReLU(RectifiedLinearUnit):输出大于0时等于自身,小于等于0时为0,广泛应用于深度神经网络。;二.神经网络简介;二.神经网络简介;二.神经网络简介;二.神经网络

文档评论(0)

1亿VIP精品文档

相关文档