Hadoop+Spark大数据技术与应用 课件第一章 HadoopSpark大数据技术基础知识.pptx

Hadoop+Spark大数据技术基础知识

CONTENTS目录01大数据概述02Hadoop技术体系03Spark技术体系04Hadoop与Spark的关系及应用实践05总结与思考

大数据概述01

大数据的概念国家战略中的大数据2015年《促进大数据发展行动纲要》首次将大数据列为国家战略，2023年我国大数据产业规模超1.5万亿元大数据的定义指容量大、类型多、存取速度快、应用价值高的数据集合，涵盖结构化、半结构化与非结构化数据

大数据的5V特点大量（Volume）数据规模以PB、EB为单位，远超传统数据库处理能力，为挖掘潜在规律提供素材高速（Velocity）数据生成与处理速度快，