《大学计算机基础》_大学计算机基础 第8章 计算机新技术.pptxVIP

第8章计算机新技术主讲：XXXX?：XXXX?：XXXX@XX.com

01大数据基础02物联网目录CONTENTS03人工智能04云计算05区块链

移动互联网的普及以及物联网技术的快速发展，全球数据种类不断增多，数据总量也以惊人的速度增长。与此同时，伴随着大数据技术演技和应用的快速发展，各国把发展大数据上升为国家战略。大数据、物联网、人工智能、云计算、区块链等多点突破和融合互动将推动新产业、新业态、新模式的兴起，这势必将重新塑造全球经济竞争格局，也将为中国经济引擎升级带来新的机遇和挑战。前言

大数据大数据技术的发展动力大数据的应用大数据技术基础大数据的概念思维导图的绘制大数据的特征

大数据的概念及特征（1）什么是大数据？大数据这一概念的形成，有三个标志性事件2008年9月，美国《自然》（Nature）杂志专刊—ThenextGoogle,第一次正式提出“大数据”概念。2011年2月1日，《科学》（Science）杂志专刊—Deadlingwithdata,第一次综合分析了大数据对人们生活造成的影响，详细描述了人类面临的“数据困境”2011年5月，麦肯锡研究院发布报告——《Bigdata:Thenextfrontierforinnovation,competition,andproductivity》,第一次给大数据做出相对清晰的定义。

大数据的概念及特征麦肯锡全球研究院：大数据是指大小超过经典数据库系统收集、存储、管理和分析能力的数据集。这一定义是站在经曲数据库的处理能力的基础上看待大数据的。维基百科：规模庞大，结构复杂，难以通过现有商业工具和技术在可容的时间内获取、管理和处理的数据集。美国国家标准技术研究院（NIST）：具有规模巨大、种类繁多、增长速度快和变化频繁的特征，且需要一个可扩展体系结构来有效存储、处理和分析的广泛的数据集。IBM给出一个“4V特性”的定义：强调了大数据的数量、多样性、速度和真实性等方面，后来也将数据价值吸引进来，成为大数据的“5V特性”。（1）什么是大数据？

大数据的特征（2）大数据的特征体量大（Volume）种类多（Variety)速度快（Velocity）价值高（Value）

大数据技术发展的动力云计算、人工智能、物联网、硬件性价比的提高以及软件技术的进步推动大数据技术的发展。

大数据技术发展的动力

大数据的若干核心价值大数据可以帮助发现规律大数据可以帮助解释现象大数据可以帮助预测未来社会：大数据提高决策能力和政府治理能力经济：大数据成为推动经济转型发展的新动力科研：大数据成为科学研究的新途径

大数据的应用大数据无处不在，包括金融、汽车、零售、餐饮、电信、能源、政务、医疗、体育、娱乐等在内的社会各行各业都已经融入了大数据的印迹

大数据相关技术基础（一）（1）云计算与大数据大数据的基础架构支持

大数据相关技术基础（一）（2）云计算的支撑作用大数据处理需要拥有大规模物理资源的云数据中心和具备高效的调度管理功能的云计算平台的支撑。从某种观点上看，没有计算机的云计算技术，就不会有大数据的被分析和利用。

大数据相关技术基础（一）（3）分布式处理分布式处理是将不同地点的，或具有不同功能的，或拥有不同数据的多台计算机通过通信网络连接起来，在控制系统的统一管理控制下，协调地完成大规模信息处理任务的计算机系统。

大数据相关技术基础（二）（1）大数据采集和预处理数据采集：数据采集是指从真实世界对象中获得原始数据的过程。常见数据的来源：对现实世界的测量、人类的记录、计算机生成的数据常用的采集方式：接（PULL-based）和推（Push-based)

大数据相关技术基础（二）（2）数据预处理通过数据预处理工作，可以使残缺的数据完整，并将错误的数据纠正、多余的数据去除，进而将所需的数据挑选出来，并且进行数据集成。常见的预处理方法：数据变换、不一致检测与修复、缺失值填充、实体识别和真值发现等。

大数据相关技术基础（二）（3）数据集成把不同来源、格式、性质的数据在逻辑上或物理上有机地集中，通过一种一致的、精确的、可用的表示法，对同一种现实世界中的实体对象的不同数据做整合的过程，从而提供全面的数据共享，经过数据分析挖掘产生有价值的信息。

大数据相关技术基础（三）大数据的存储特性现在的大数据都是高度分散的、结构松散，并且体积越来越大。

大数据相关技术基础（四）（1）大数据计算面向大数据处理的数据查询、统计、分析、挖掘等需求，促生了大数据计算的不同计算模式，常用的大数据计算框架有两种：离线批处理计算实时流式处理计算

大数据相关技术基础（四）大数据分析（1）数据描述性分析数据描述性分析关注于描述一组数据的统计特征，帮助我们了解数据分布特征、以及分散性和关联性等数字特征。典型