新一代信息技术基础- 课件 第七单元 大数据技术.pptx

大数据技术07 华为，大数据产业的管道工当前，大数据所带来的乘法效应已经在各个行业中蔓延开来，并衍生出更大量、更具分析应用价值的数据。早在2014年，华为总裁任正非提出：华为心中的大数据，是为互联网传递数据流量的管道做铁皮。这些年，低调的华为，一直在践行任正非的战略定位，充当着中国大数据产业的管道工角色，默默打造着产业赖以繁荣的基础设施。华为帮助企业搭建底层IT设施，打好大数据应用的基础，在这上面衍生出数据可视化和各式各样的大数据应用。华为所做的是大数据产业中最底层的部分，也是中国大数据产业发展必不可少的基石。 任务情境近日，市场监督局委派张明作为市场调查员，对本市的水果销售进行一次市场分析，主要分析水果的单价、销售量、销售额和区域之间的数据相关性，为经营生产者的市场活动提供借鉴和参考。由于市场数据量庞大，常用的Excel软件已无法胜任，于是张明提议使用一款新型大数据处理工具——自助仪表盘，来实现这一次的市场调研分析。 任务情境近日，市场监督局委派张明作为市场调查员，对本市的水果销售进行一次市场分析，主要分析水果的单价、销售量、销售额和区域之间的数据相关性，为经营生产者的市场活动提供借鉴和参考。由于市场数据量庞大，常用的Excel软件已无法胜任，于是张明提议使用一款新型大数据处理工具——自助仪表盘，来实现这一次的市场调研分析。 任务分析工欲善其事，必须利其器，一个好的工具可以使我们的工作事半功倍，快速挖掘出大数据的价值。作为信息技术的初学者，在面对庞大而复杂的大数据时，有必要选择一个合适的处理工具。 任务分析工欲善其事，必须利其器，一个好的工具可以使我们的工作事半功倍，快速挖掘出大数据的价值。作为信息技术的初学者，在面对庞大而复杂的大数据时，有必要选择一个合适的处理工具。Excel作为常用的数据处理工具，有着简单易上手的特点，但面对大规模数据处理时，其性能和效率就显得不太够用了。Excel 处理的单表最大数据量为1048576行和16384列。 一般来说处理规模在100万行以下的数据较为合适，一旦数据超过这个范围，Excel将变得非常卡顿，打开已经非常耗时，更无法进行进一步的数据处理分析工作。而市场监督局的市场分析数据，面对的是一个区一个城市的数据，其量级往往达到千万级，这个数据量级下Excel作为分析工具就显得不够用了，此时自助仪表盘此时就可以派上用场。 任务分析以Hadoop、Python等为代表的工具，种类丰富，功能强大，但是门槛较高。借助 一些简洁明了的数据分析工具，来实现超大数据集的动态分析和可视化交互，是一个不错的选择。在本任务中，将采用辰宜科技出品的数据分析工具——自助仪表盘”，进行大数据相关性的分析和可视化作图，来实现本任务既定的目标。 相关知识点1.大数据大数据，是指在短时间内无法通过常规手段或者方法来进行捕捉、分析以及处理的数据集或者是数据集合。大数据的概念最早于2008年左右被提出，目前经过十几年的发展已经在多个领域衍生出了不同的应用，包括云计算、物联网、工业4.0等领域。通常业界认为大数据有四个特点：数据规模大（Volume）、速度响应快（Velocity）、数据多样性（Variety）、价值密度低（Value），简称4V特性。 相关知识点2.数据分析数据分析，即以统计学的视角或者方法，对大量的数据进行分析，并将它们加以汇总和理解，从而最大化的得到数据中所蕴含的重要信息，最大化的发挥数据本身的作用。通过数据分析，发现其中最具有价值的内容和信息，从而尽可能的满足不同客户对数据价值的需求。 相关知识点3.数据可视化数据可视化就是将数据转换成图或表等，以一种更直观的方式展现和呈现数据。通过“可视化”的方式，将我们看不懂的数据通过图形化的手段进行有效地表达，准确高效、简洁全面地传递某种信息，有助于快速发现数据背后的规律、找到原因、做出判断。数据可视化是一项非常实用的分析方法，通常利用图形、图像处理、计算机辅助分析、计算机视觉以及其他用户界面的方法，来多角度、全方位的展现出一个数据集中所蕴含的结论、规律、特征和价值。 任务实施1——大数据仪表盘实战一、登录系统1、打开浏览器→输入“”→按回车，打开辰宜云知识平台，点击“大数据技术”图标，登录辰宜云知识平台。2.在“实施任务”列表中选择“大数据订单分析”任务，点击右侧的【开始任务】按钮。 任务实施1——大数据仪表盘实战二、仪表盘地图设置及展示1.在左侧栏下方的“智能配图”面板中选取图形样式，样式包括柱状图、折线图、地图、饼图等图形，点击 地图图标，选择地图样式。 任务实施1——大数据仪表盘实战二、仪表盘地图设置及展示1.在左侧栏下方的“智能配图”面板中选取图形样式，样式包括柱状图、折线图、地图、饼图等图形，点击 地图图标，选择地图样式。 任务实施1——大