Hadoop技术培训大纲.docVIP

附录：Hadoop技术培训纲领（4天） 课程模块 模块一 模块二  课程主题 主要内容 事例和演示 ? 传统大规模数据解析存在的问题 ? Hadoop在介绍领域的使用事例介 ? Hadoop概括 绍 ? Hadoop与散布式文件系统 Hadoop简 ? Hadoop生态系统 ? Hadoop的行业应用事例解析 介和生态 ? Hadoop在云计算和大数据的地点和关 系统介绍 系 ? Hadoop版本介绍 ? Hadoop与GoogleFS的关系 ? Hadoop在国内的使用状况和将来 ? Hadoop安装所需软件介绍 ? Hadoop单机演示 ? Hadoop单机安装 ? Hadoop伪散布式演示 ? Hadoop伪散布式安装 ? Hadoop完整散布式演示 ? Hadoop完整散布式安装 ? Hadoop两种启动方式的演示 ? Hadoop三个节点安装的配置介绍 ? Hadoop安装常有错误的介绍和演 ? Hahoop多节点ssh配置 示 ? Hadoop格式化详解 ? Hadoop自带的wordcount和pi 演 ? Hadoop核心配置文件介绍 示 ? 核心配置文件core-site.xml ? HadoopStreaming的事例演示 ?HDFS配置文件hdfs-site.xml Hadoop安 ? Mapreduce配置文件mapred-site.xml ? master文件配置详解 装和主要 ? slave文件配置详解 配置文件 ? Hadoop启动和停止方法一 介绍 —start-all.sh 详解 —stop-all.sh详解 ? Hadoop的启动和停止方法二 —hadoop-deamon.sh详解 ? Hadoop安装的常有错误介绍和解决方 案 ? 使用自带的wordcount和pi测试集群 安装能否成功 ? 使用Streaming 来测试集群安装能否 成功 Hadoop组 模块三 件介绍 Hadoop的 模块五 HDFS模块 MapReduc 模块六er入门和 高级  HadoopNameNode介绍 HadoopSecondaryNameNode介绍 HadoopDataNode介绍 ? HadoopJobTracker 介绍 ? HadoopTaskTracker 介绍 ? HDFS架构介绍 ? Hadoop的shell命令演示 ? HDFS原理介绍 ? Hadoop的API接口演示 ? NameNode功能详解 ? Hadoop的客服端接入事例 DataNode功能详解 SecondaryNameNode功能详解 HSFD的fsimage和editslog详解 HDFS的block详解 HDFS的block的备份策略 Hadoop的机架感知配置 HDFS的shell命令介绍 ?HDFS的thriftserver服务介绍 HDFS的API接口介绍 HDFS的权限详解 Hadoop的客服端接入事例 ? Mapreduce原理 ? MapReduce实现海量数据比较大 ? MapReduce流程 小事例 ? 解析一个MapReduce程序 ? 自定义Hadoop种类事例 ? Mapper和Reducer抽象类详解 ? 自定义Partitioner 事例 ? Mapreduce的最小驱动类 ? 实此刻内存随机生成 100个数， ? MapReduce自带的种类 分红两个Map来比较大小 ? 自定义Writables和 ? 自定义inputFormat 和 WritableComparables InputSplit和RecorderReader来 ? Mapreduce的输入InputFormats 实现MapReduce读取Redis里面 ? MapReduce的输出OutputFormats 的数据。 ? 自定义InputFormat ? 多文件输出和自动定义 ? 自定义InputSPlits MapReduce的输有名 ? 自定义RecorderReader ? MapReduce实现Join 算法事例 ? Combiner详解 ? MapReduce实现海量文档相像度 ? Partitioner 详解 算法 ? DistributeFileSystem详解 ? 自定义Counter事例实现 ? HadoopTools 工具介绍 ? MapReduce实现Pangrank算法。 ? Counter计数器详解 ? MapReduce单元测试：Map的单元 ? 自定义Counter计数器 测试测试、reduce单元测试和 ? MapReduce的优化 MapReduce整体的单元测试实战。 ? Map和Reduce的个数设置 ? 某企业使用MapReduce解析日记 Hive和 模块七pig的使 用