大数据导论课件 第1章-大数据概述.pptxVIP

第1章大数据概述

目录CONCENTS数据大数据时代大数据的发展历程世界各国的大数据发展战略大数据的概念大数据的影响大数据的应用大数据产业1.11.21.31.41.51.61.71.81.91.10高校大数据专业大数据与数字经济

1.1数据

提纲1.1.1数据的概念1.1.3数据组织形式1.1.2数据类型1.1.4数据的生命周期1.1.6数据的价值性1.1.5数据的使用1.1.7数据爆炸1.1.8数商

数据数据和信息是两个不同的概念，信息是较为宏观的概念，它由数据的有序排列组合而成，传达给读者某个概念方法等，而数据则是构成信息的基本单位，离散的数据没有任何实用价值数据是指对客观事件进行记录并可以鉴别的符号，是对客观事物的性质、状态以及相互关系等进行记载的物理符号或这些物理符号的组合，是可识别的、抽象的符号1.1.1数据的概念

文本A图片B视频D音频A1.1.1数据的概念

数据也被称为“未来的石油”1.1.1数据的概念

文本A图片B视频D音频A1.1.2数据类型

文件数据库计算机系统中的很多数据都是以文件形式存在的，比如一个WORD文件、一个文本文件、一个网页文件、一个图片文件等数据库已经成为计算机软件开发的基础和核心，数据库在人力资源管理、固定资产管理、制造业管理、电信管理、销售管理、股市管理、图书馆管理、政务管理等领域发挥着至关重要的作用1.1.3数据组织形式

数据库NoSQL数据库关系数据库层次数据库网状数据库主流数据库1.1.3数据组织形式

随着Web2.0的兴起，非结构化数据迅速增加，目前人类社会产生的数字内容中有90%是非结构化数据，因此，能够更好支持非结构化数据管理的NoSQL数据库应运而生1.1.3数据组织形式

1.1.4数据的生命周期实施自动分层数据管理，即自动把不同生命周期阶段的数据存放在最合适的存储设备上，提高数据可用性和管理效率根据不同的数据管理策略分离出有效的数据，对不同类型数据制定不同的管理策略，并及时清理无用的数据对数据进行自动分类满足不同类型的数据对不同生命周期阶段的存储要求，对关键数据进行数据备份保护，对处于生命周期末期的数据进行归档并保存到适合长期保存数据的存储设备中构建分层的存储系统0201数据的生命周期03

第一步数据清洗第二步数据管理第三步数据分析1.1.5数据的使用

数据使用的实例：数据仓库1.1.5数据的使用

数据的价值根本在于可以为人们找出答案。数据往往都是为了某个特定的目的而被收集，而数据的价值对于数据收集者而言，价值都是显而易见的。数据的价值是不断被人发现1.1.6数据的价值性

数据的价值性数据的价值不会因为不断被使用而削减，反而会因为不断重组而产生更大的价值过去现在在过去，一旦数据的基本用途实现了，往往就会被删除，一方面是由于过去的存储技术落后，人们需要删除旧数据来存储新数据，另一方面则是人们没有认识到数据的潜在价值各类收集来的数据都应当被尽可能长时间地保存下来，同时也应当在一定条件下与全社会分享，并产生价值1.1.6数据的价值性

在大数据时代以前，最有价值的商品是石油，而今天和未来则是数据。目前占有大量数据的谷歌、亚马逊等全球前五大公司，每个季度的利润总和高达数十亿美元，并在继续快速增加，这都是数据价值的最好佐证。因此，要实现大数据时代思维方式的转变，就必须要正确认识数据的价值，数据已经具备了资本的属性，可以用来创造经济价值数据的价值性1.1数据

人类进入信息社会以后，数据以自然方式增长，其产生不以人的意志为转移从1986年开始到2010年的20年时间里，全球数据的数量增长了100倍，今后的数据量增长速度将更快，我们正生活在一个“数据爆炸”的时代1.1.7数据爆炸

今天，世界上只有25%的设备是联网的，在联网设备中大约80%是电脑和手机，而在将来，随着移动通信5G时代的全面开启，将有更多的用户成为网民，汽车、电视、家用电器、生产机器等各种设备也将联入互联网。随着Web2.0和移动互联网的快速发展，人们已经可以随时随地、随心所欲发布包括博客、微博、微信、抖音等在内的各种信息1.1.7数据爆炸

在1分钟内，新浪产生2万条微博，Twitter产生10万条推文，苹果下载4.7万次应用，淘宝可卖出6万件商品，百度可以产生90万次搜索查询，Facebook可以产生600万次浏览量1.1.7数据爆炸

随着物联网的推广和普及，各种传感器和摄像头将遍布各个角落，每时每刻都在自动产生大量数据1.1.7数据爆炸

人类社会正经历第二次数据爆炸，“数据爆炸”成为大数据时代的鲜明特征1.1.7数据爆炸

数据爆炸数据爆炸对科学研究提出更高要求，需要设计出更加灵活高效的数据存储、处理和分析工具，应对大数据时代的挑战，必