人工神经网络学习总结笔记.docxVIP

人工神经网络学习总结笔记主要侧重点：概念清晰进行必要的查询时能从书本上找到答案第一章：绪论1.1人工神经网络的概述“认识脑”和“仿脑”：人工智能科学家在了解人脑的工作机理和思维的本质的基础上，探索具有人类智慧的人工智能系统，以模拟延伸和扩展脑功能。我认为这是人工神经网络研究的前身。 形象思维：不易被模拟人脑思维抽象 推理逻辑思维：过程 ：信息概念 最终结果 特点：按串行模式容易被机器模拟的思维方式人脑与计算机信息处理能力的不同点：方面 类型人脑计算机记忆与联想能力可存储大量信息，对信息有筛选、回忆、巩固的联想记忆能力无回忆与联想能力，只可存取信息学习与认知能力具备该能力无该能力信息加工能力具有信息加工能力可认识事物的本质与规律仅限于二值逻辑，有形式逻辑能力，缺乏辩证逻辑能力信息综合能力可以对知识进行归纳类比和概括，是一种对信息进行逻辑加工和非逻辑加工相结合的过程缺乏该能力信息处理速度数值处理等只需串行算法就能解决的应用问题方便，计算机比人脑快，但计算机在处理文字图像、声音等类信息的能力远不如人脑1.1.2人脑与计算机信息处理机制的比较人脑与计算机处理能力的差异最根本的原因就是信息处理机制的不同，主要有四个方面方面类型人脑计算机系统结构有数百亿神经元组成的神经网络由二值逻辑门电路构成的按串行方式工作的逻辑机器信号形式模拟量（特点：具有模糊性。难以被机器模拟）和脉冲两种形式离散的二进制数和二值逻辑形式信息储存人脑中的信息分布存储于整个系统，所存储的信息是联想式的信息处理机制高度并行的非线性信息处理系统（体现在结构上、信息存储上、信息处理的运行过程中）有限集中的串行处理机制1.1.3人工神经网络的概念：在对人脑神经网络的基本认识的基础上，用数理方法从信息处理的角度对人脑神经网络进行抽象，并建立某种简化模型，称之为人工神经网络，是对人脑的简化、抽象以及模拟，是一种旨在模仿人脑结构及其功能的信息处理系统。其他定义：由非常多个非常简单的处理单元彼此按某种方式相互连接而形成的计算系统，外部输入信息之后，系统产生动态响应从而处理信息。它是由许多简单的并行工作的处理单元组成的系统，其功能会因网络结构、连接强度以及各单元的处理方式的不同而不同1.3神经网络的基本特点与功能基本特点：1、结构特点：信息处理的并行性、信息存储的分布性、信息处理单元的互联性、结构的可塑性。神经网络内在的并行性与分布性表现在其信息的存储于处理都是空间上分布、时间上并行的。2、性能特点：高度的非线性、良好的容错性和计算的非精确性。3、能力特征：自学习、自组织（重构）与自适应性。神经网络的基本功能：1、联想记忆：自联想记忆与异联想记忆 2、非线性映射3、分类与识别4、优化计算5、知识处理第二章 人工神经网络建模基础2.1～2.2 讲述了生物神经系统以及生物神经网络的建模基础神经元所产生的信息是具有电脉冲形式的神经冲动，脉冲的宽度和幅度相同，但是间隔是随机变化的。人脑中，外界的刺激不同可以改变神经元之间的突触关系，即突触厚膜电位的方向以及大小，从突触信息传递的角度来看，表现为放大倍数和极性的变化。空间整合的概念（BP29）信息整合这一段中阀值特性：我认为阀值特性即静息电位必须上升到一定数值范围即超过阀值电位之后，神经元才会产生兴奋，信息才能以脉冲的形式得到传递。所谓的时间整合，如果由一个脉冲所引起的突触膜后电位很小，只有在持续时间内当另一脉冲到达的时候，总的突触膜后电位增大。2.3 人工神经元模型人工神经网络是在现代神经生物学研究基础上提出的模拟生物的过程，反映人脑某些特性的一种计算结构，是人脑神经系统的一种抽象、简化和模拟而不是对它的真实描写。神经网络的基本器件是神经元和突触。人工神经网络当中的神经元是处理单元，也称之为节点。人工神经元是对生物神经元的信息处理过程的抽象模拟，通过数学语言对其进行描述，对其结构和功能进行模拟，用模型图予以表达。2.3.1 神经元的建模其建模的六点假设（BP30）加权系数的概念：又称之为权重值，其正负模拟了神经元当中的兴奋和抑制，大小呢模拟了突触之间的不同连接强度。整合之后的信息相当于生物神经网络当中的膜电位，整合之后的信息通过变换函数可以得出输出以后的信息大小，这个变换函数通常是非线性的。所谓的变换函数我认为它是表征了不用的信息处理特性，反映神经元输入与激活状态之间的关系。2.3.2神经元的数学模型（BP31）神经元的状态表达式（BP31式2.1 2.2 为最基本的表达方式），这个表达式清晰地反映了神经元建模的6种假设。其中，输出oj下标体现了多输入，单输出。权重wij的正负体现了突触的兴奋与抑制，Tj代表了阀值特性，输入的总和为信息的净输入，常用netj或是netj’来表示，只有净输入大于阀值的时候，神经元才能被激活，输出值与输入值之间的