大数据分析的深度神经网络方法.docxVIP

章毅四川大学计算机学院2016.03.25 重 庆大数据简介大脑新皮层的神经网络结构大脑新皮层神经网络的记忆大数据分析GPU深度神经网络计算平台2大数据历史深度神经网络在语音大美国奥巴马政府发布了大数据国务院发布大数据发展行动纲要，大数据正式上升为我国国家意志“大数据”数据、图像大数据领域计划，将大数据战略上升为美一词诞生接连取得巨大突破国国家意志大数据商业2015应用诞生20142013201220112006200420001997我国大数据产业兴起大数据分布式G. E. Hinton 教授在Google Brain计划，激全世界兴起基于深度神经网络的大数工信部白皮书指出：大数据分析是大存储与并行计《Science》发表文章，起大规模神经网络在据分析方法在学术界和工数据研究的重要环节，其中大数据分大数据热潮算技术诞生深度神经网络兴起大数据分析中的应用业界均取得巨大成功析的神经网络方法具有良好前景大数据的概念体量浩大多源异构大数据的目标实现大数VolumeVariety据转换为大数据的价值基本特点生成快速价值稀疏VelocityValue问题：怎样实现大数据的目标？4展示平台大? 大数据知识展示数? 大数据产品据关键技术数据平台? 大数据采集，标记? 大数据存储，管理大数据分析是大数据转换为价值的最重要的环 节，否则，大数据仅仅 是一堆数据而已。大数据分析是大数据转化为价值的桥梁价值问题：怎样设计大数据分析方法？5进入大脑的信息被编 码为某种数据，进而 由大脑神经网络处理人类大脑是天然的大数据处理器！每秒信息传递和交换1000亿次，PB级数据同步处理声音、温度、气味、图像等数据50亿本书的存储容量每秒人眼数据量140.34GB在识别、判断、预测等智能行为方面展现出十分强大的能力优秀的大数据处理器6大数据+深度神=巨大经网络成功深度神经网络方法神经网络是一种模拟 大脑神经网络的计算方法大数据分析最成功的方法价值大数据分析是大数据转化为价值的桥梁7深度神经网络历史2004年HTM神经网络； 智能理论 新框架Jeff Hawkins1985年1960s. 第二代神 第一代神 经网络 经网络 BP 感知机至今深度神经网络在众多领域均取得重大成功2009年Recurrent神经网络异军突起Jürgen Schmidhuber2006年深度学习； 前馈深度神经网络Geoffrey Hinton深度神经网络方法神经网络结构⊕学习算法大脑新皮层大脑新皮层神经网络结构神经网络的记忆机制模拟大脑神经计算的方法9大数据简介大脑新皮层的神经网络结构大脑新皮层神经网络的记忆大数据分析GPU深度神经网络计算平台10人脑的新皮层一张餐巾大小（约1000cm2)六张扑克牌厚（约2mm ）每平方毫米的面积包含了约10 万个神经元300亿个神经元100 万亿突触连接神经科学认为：智能 是由大脑神经网络的 活动产生的。几乎所有我们所认识到的与智能有关的内 容，如感知、语言、 想象力、数学、艺术、 规划等等，都发生于 大脑新皮层。新皮层的神经网络对智能的产生起至关重要的作用。11联合区域听觉区域视觉区域触觉区域12联合区域听觉区域视觉区域触觉区域按照功能区构成层级结构基因决定大脑皮层的整个结构，包括不同层级区域间依靠神经柱内复杂的连接进行通讯各个区域之间的相互连接的具体细节13新皮层连接的拓扑结构14前馈深度神经网络----无限逼近任何非线性函数RBM神经网络2006年，G. E. Hinton教授在《Science》发表文章，基于前馈深度神经网络的大数据分析方法兴起Geoffrey Hinton大数据 ⊕ 前馈深度神经网络应用? 语音识别：2012，RBM深度模型降低错误率30%，是10年来最大突破领域? 图像识别：大规模对象识别(ImageNet)正确率(95.06%)超过人类(94.9%)应用4:12016年03月产AlpahGo vs李世石品Google世界冠军2012年10月微软使用深度神经网络于语音识别， 发布同声传译产品2014年5月香港中文大学DeepID2模型人脸识 别率超越人类水平2015年2月微软亚洲研究院大规模对象识别正确率超过人类2016年01月美国企业Enlitic开发的基于深 度学习的癌症检测系统，肺癌检 出率超过放射技师Recurrent 神经网络----无限逼近非线性动力学系统