第四章人工神经网络概述.pptVIP

智能控制技术 中国计量学院自动化教研室 谢 敏 智能控制技术 第4章 人工神经元网络模型 4.1 引言 4.2 常见神经网络模型 4.1 引言 一、人工神经网络研究概述 人脑由一百多亿个神经细胞组成，这些细胞组成的生物神经网络，是人类智能的物质基础。 人工神经网络是指利用工程技术手段模拟人脑神经网络结构和功能的一种技术系统。 一、人工神经网络研究概述 1、1943 ~ 1969年为初创期 一、人工神经网络研究概述 2、1970~1986年为过渡期 一、人工神经网络研究概述 3、 1987~今 发展期 理论研究：多种神经网络模型和理论。 应用研究：模式识别、信息处理、智能控制等。 二、人脑神经细胞的结构和功能 人脑中约有一百多亿个神经细胞。 二、人脑神经细胞的结构和功能 1．细胞体 细胞体是由很多分子形成的综合体，是神经元活动的能量供应地，在整个细胞的最外层称为细胞膜。 2．树突 细胞体的延伸部分产生的分枝称为树突，树突是接受从其它神经元传入的信息的入口。 二、人脑神经细胞的结构和功能 3．轴突 细胞体突起的最长的外伸管状纤维称为轴突。轴突最长可达1米以上。轴突是把神经元兴奋的信息传出到其它神经元的出口。 二、人脑神经细胞的结构和功能 4、突触 是一个神经元与另一个神经元之间相联系并进行信息传送的结构。 它由突触前成分，突触间隙和突触后成分组成。突触前成分是一个神经元的轴突末梢。突触间隙是突触前成分与后成分之间的距离空间。突触后成分可以是细胞体，树突或轴突。 突触的存在说明：两个神经元的细胞质并不直接连通，两者彼此联系是通过突触这种结构接口的。有时，也把突触看作是神经元之间的连接。 二、人脑神经细胞的结构和功能 神经元的4种生物行为有： 能处于抑制或兴奋状态； 能产生爆发和平台两种情况； 能产生抑制后的反冲； 具有适应性。 三、神经元的信息处理与传递 三、神经元的信息处理与传递 三、神经元的信息处理与传递 三、神经元的信息处理与传递 四、神经元的数学模型 四、神经元的数学模型 四、神经元的数学模型 四、神经元的数学模型 四、神经元的数学模型 四、神经元的数学模型 四、神经元的数学模型 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 四、神经网络结构及功能 4.1 引言 执行阶段 执行阶段是指神经网络对输入信息进行处理，并产生对应的输出过程。在执行阶段，网络的连接结构和权系数是已经确定并且不会变化的。这时有： 4.1 引言 xj：前级神经元的输出； Wij：第i个神经元和前级j个神经元突触的权系数； θi：第i个神经元的阈值； fi：第i个神经元的非线性激活函数； yi：第i个神经元的输出。 * * 4.1 引言 4.1 引言 《感知器》 Minsky 1969 感知器模型 Rosenblatt 1958 Hebb学习规则 Hebb（心理学家） 1949 提出形式神经元模型 McCulloch（心理学家） Pitts（数学家） 1943 成果 人物 时间 4.1 引言 BP算法 Rumelhart 1986 Hopfield网络，可用电路实现 Hopfield 1982 自适应共振理论 Grossberg 1976 成果 人物 时间 4.1 引言 4.1 引言 4.1 引言 4.1 引言 4.1 引言 4.1 引言 突触的4种生物行为有： 能进行信息综合； 能产生渐次变化的传送； 有电接触和化学接触等多种连接方式； 会产生延时激发。 目前，人工神经网络的研究仅仅是对神经元的第一种行为和突触的第一种行为进行模拟，其它行为尚未考虑。 4.1 引言 1．神经元的兴奋与抑制： 一个神经元的兴奋和抑制两种状态是由细胞膜内外之间不同的电位差来表征的。 在抑制状态，细胞膜内外之间有内负外正的电位差，这个电位差大约在-50—-100mv之间。 在兴奋状态，则产生内正外负的相反电位差，这时表现为约70—100mv的电脉冲。 细胞膜内外的电位差是由膜内外的离子浓度不同导致的。 细胞的兴奋电脉冲宽度一般大约为1ms。 4.1 引言 2．神经元的信息传递及阀值特性 由神经元传出的电脉冲信号通过轴突，首先到达轴突末梢，使其中的囊泡产生变化从而释放神经递质，这种神经递质通过突触的间隙而进入到另一个神经元的树突中。树突上的受体能够接受神经递质从而去改变离子的通透性，使膜外内离子浓度差产生变化，进而使电位产生变化。显然，信息就从一个神经元传送到另一个神经元中。 当神经元接受来自其它神经元