《人工智能基础与应用》_《人工智能基础与应用》-模块2熟知人工智能原理技术.pptxVIP

;;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;任务一;;任务二;任务二;任务二;任务二;任务二;通常把人工神经网络的发展历史分成4个时期，启蒙时期（1890-1969），低潮时期（1969-1982），复兴时期（1982-1986），新时期（1986至今）。

;1.启蒙时期（1890-1969）：

1890年，心理学家威廉·詹姆斯（WilliamJames）出版了第一部详细论述人脑结构及功能的专著《心理学原理》。

1943年，神经生理学家沃伦·麦卡洛克(Warren?S.?McCulloch)和数理逻辑学家沃尔特·皮茨(WalterPitts)提出人工神经元的数学模型---M-P模型。

1949年，心理学家赫布（Hebb）出版了《TheOrganizationofBehavior》（行为组织学），他在书中提出了突触连接强度可变的设想。

1958年，罗森布拉特（FrankRosenblatt）发明了一种称为感知机（Perceptron）的人工神经网络模型。

;2.低潮时期（1969-1982）：

1969年，符号主义派的代表人物明斯基（M.Minsky）与麻省理工学院的佩珀特（SeymourPapert）指出神经网络的两个关键问题：简单神经网络只能运用于线性问题的求解，无法解决异或问题等非线性可分问题。由于明斯基的学术地位和影响力，让人们对感知机的学习能力产生了怀疑，带来了神经网络发展的“寒冬”。

1974年，保罗·沃博斯（PaulWerbos）在哈佛大学攻读博士学位期间，就在其博士论文中首次提出了反向传播算法并构建反馈神经网络，可以构建多层神经网络并能解决异或等问题，但当时没有引起重视。

;3.复兴时期（1982-1986）：

1982年，霍普菲尔德（JohnHopfield）将物理学的动力学思想引入到神经网络中，提出了Hopfiled神经网络。

1986年,心理学家大卫·鲁梅尔哈特（DavidRumelhart）、杰弗里·辛顿(GeoffreyE.Hinton和罗纳德·威廉姆斯(RonaldWilliams)在自然杂志上发表一篇突破性的论文《通过反向传播算法实现表征学习》（LearningrepresentationsbyBack-propagating?Errors），清晰论证了“误差反向传播”（Back-PropagatingErrors）算法是切实可操作的训练多层神经网络的方法，彻底扭转明斯基《感知机》一书带来的负面影响，多层神经网络的有效性终于再次得???学术界的普遍认可，从而将神经网络的研究推向了新的高潮。

;4.新时期（1986至今）：

1987年6月，首届国际神经网络学术会议在美国圣地亚哥召开，成立了国际神经网络学会

1980年代末，迈克尔·乔丹(MichaelI.Jordan)和杰弗里·埃尔曼(JeffreyElman)提出了简单循环神经网络，拉开了循环神经网络（RecurrentNeuralNetwork）的研究序幕。

1989年，杨立昆(YannLeCun)?等人使用BP算法来训练深度神经网络来识别手写邮编，该神经网络被命名为LeNet。LeNet被认为是最早的卷积神经网络之一(ConvolutionalNeuralNetwork,简称CNN)，很大程度推动了深度学习领域的发展。

1997年，塞普·霍克赖特(SeppHochreiter)和于尔根·施米德胡贝(JürgenSchmidhuber)提出长短期记忆人工神经网络（Long-ShortTermMemory,LSTM）问世，是用于解决一般RNN存在的长期依赖问题。

;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;任务二;;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务一;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;任务三;;任务四;任务四;任务四;任务四;任务四;任务四;任务四;任务四;任务一;任务四;任务四;任务四;任务四;任务四;任务四;任务四;任务四;;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;任务五;;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;任务六;