大数据与智能信息处理技术交流及应用探讨.pptx

大数据与智能信息处理技术交流及应用探讨目录智能及人工智能大数据基本概念机器学习简介推荐问题简介高教场景下的大数据及智能应用系统智能智能词缀Legere（拉丁文），意为采集（特别是果实）、收集、汇集，并由此（按照某知识或规则）进行选择，形成一个东西；Intelegere是从中（按照某知识或规则）选择，进行理解、领悟和认识在复杂的机械装置与智能之间存在长期的联系摘自帕梅拉.麦考达克《机器思维》……人工智能达特矛斯会议人工智能Dartmouth Conference，1956年夏1个研究目标John McCarthy、Marvin Minsky、Nathaniel Rochester和Claude Shannon等发起邀请Trenchard More、Arthur Samuel、Allen Newell 、 Herbert A. Simon等参加研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统机器智能Top-Down AI2个研究视角智能机器Bottom-up AI3个研究层次主旨：研究和探讨用机器模拟智能的一系列有关问题感知、思维、行为4种科学模拟首次提出“人工智能”，标志着“人工智能” 新兴学科的正式诞生结构模拟、功能模拟、行为模拟、机制模拟人工智能归纳驱动，学习机制是重点数据是主流……1956年学术定义和认可20世纪80年代起至今机器学习人工智能1970198020世纪70年代初到80年代知识人工智能20世纪50年代到70年代初推理人工智能Alvin Toffler，美国作家和未来学家，第三次浪潮，1980John R. Mashey，美国计算机科学家，USEUIX会议，1998奥巴马，大数据倡议计划，2012.3.29中国两会政府报告，2014.3.5……演绎驱动，推理机制是重点，形式化是主流……机器学习之于人工智能数据之于人工智能：解决知识工程瓶颈问题的关键机器学习的准备1950年图灵提到了机器学习的可能20世纪50年代，集中在连接主义学习20世纪60-70年代，多种学习技术得到了初步发展，统计学习理论得到长足发展机器学习数据知识1983年，由Ryszard S. Michalski、Jaime G. Carbonell和Tom Mitchell合作出版的《Machine Learning: An Artificial Intelligence Approach》（该书其实是一部集早期机器学习研究之大成的文集）数据数据是指存储在某种介质上能够识别的物理符号（数、字符或者其他）① 传感器，材料及物理化学等技术相关② A/D采样及转换，材料及计算机技术③ 材料技术相关④ 数据库技术相关⑤ 应用场景、宿主环境相关⑥ 军用、民用、娱乐|通用、行业等⑦ 建模技术、求解技术等⑧ 软件工程、运营管理等①②物理信号计算机电信号获取③④⑤存储介质组织与管理约束条件存储⑥⑦⑧应用目标计算技术系统运维使用一般路径计算机思维基础科学不断发展Variety传感材料技术数据类型越来愈多更多的数据采集通道/渠道，性能越来越好Velocity采集芯片技术数据来源越来愈快更快的数据转换速度/性能，精度越来越高Volume存储材料技术数据规模越来愈大更大的数据存储效能/规模，性能越来越好Value信息计算技术更先进的理论/技术，解决方案越来越优秀用户需求持续膨胀……4应用驱动/场景驱动/数据驱动数据交叉复用是需求也是需求膨胀的响应策略CASE2有应用目标，需要哪些数据CASE1有了数据，能够做什么数据是基础.分析是核心.应用是根本.价值是目标5作为难题提出的大数据大数据是大到无法通过现有手段在合理时间内达到截取、管理、处理、并整理成为人类所能解读的信息描述大数据属性的若干VVolume 规模大，大到难以处理Variety 类型多，多到难以处理Velocity 速度快，快到难以处理Value 有价值，价值难以发现……多边利益驱动使然，各边定义无法统一若干V特征描述的是挑战，而不是本质大数据多边定义“data of a very large size, typically to the extent that its manipulation and management present significant logistical challenges.”, Oxford English Dictionary?(OED).“an all-encompassing term for any collection of data sets so large and complex that it becomes difficult to process using on-hand data management tools or traditi