大数据及Hadoop介绍.pptx

大数据及Hadoop介绍;什么是大数据，有哪些特点;目录;大数据解读;什么是大数据？;大数据的4V特性;Volume--体量有多大;Variety-类别有多少;Velocity-到底有多快;大数据的应用-典型案例;大数据的应用-普通应用;大数据应用为什么可行;Hadoop生态圈解读;Hadoop的由来;Hadoop简介;;Hadoop2.0生态圈;HDFS：Hadoop的分布式文件系统 MapReduce、Spark：分布式计算框架 Yarn：Hadoop 资源管理器 Flume、 Scribe、 Chukwa：日志收集系统 Sqoop：将关系数据库中的数据导入到HDFS的工具 Hive：基于Hadoop的一个数据仓库工具 Pig：基于Hadoop的大规模数据分析框架，提供SQL-LIKE的语言-Pig Latin Mahout（看象人）：机器学习算法库 Hbase：分布式的面向列的开源数据库 Oozie（驯象人）：作业流调度引擎 Hue：Hadoop自己的监控管理工具 Avro：数据序列化工具 ZooKeeper：开放源码的分布式应用程序协调服务;Hadoop生态圈重点组件 之 HDFS;HDFS;HDFS架构;HDFS文件写流程;HDFS读流程;HDFS写操作漫画示例-from 36;HDFS副本存放策略;Hadoop生态圈重点组件 之 MapReduce;MapReduce（分布式计算框架）;MapReduce工作原理;MapReduce工作原理;MapReduce功能特点;MapReduce缺点;Hadoop生态圈重点组件 之 Spark;Spark-内存计算框架;Spark软件栈;Hadoop生态圈重点组件 之 Yarn;Yarn;Yarn架构;YARN资源管理机制;Hadoop生态圈重点组件 之 Hive;Hive-基于MR的数据仓库;Hive组件结构;Hadoop生态圈重点组件 之 数据采集工具;Sqoop-数据同步工具;Flume-日志收集工具;Hadoop生态圈重点组件 之 Zookeeper;Zookeeper（分布式协作服务）;Hadoop中一个简单的数据流程图;Hadoop流程解读;公司大数据平台架构;功能架构;、逻辑架构;数据架构;大数据平台规划;公司大数据平台集群现状;谢谢聆听！