- 1、本文档共6页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
教材名称:大数据技术实战案例教程
ISBN:978-7-5606-6679-2
CIP:中国版本图书馆CIP数据核字(2022)第178608号
版次:2022年11月第1版
主编:徐鲁辉,副主编:于长青、王黎光,主审:张良均
出版社:西安电子科技大学出版社
图书介绍:
本书系统介绍了Hadoop、Spark、Flink等开源大数据组件的相关知识和实践技能。全书共9章,涉及到数据采集、大数据存储与管理、大数据处理与分析等大数据应用生命周期中各阶段典型组件的部署、使用和基本编程方法,内容包括部署全分布模式Hadoop集群、HDFS实战、MapReduce编程、部署ZooKeeper集群和ZooKeeper实战、部署本地模式Hive和Hive实战、Flume实战、Kafka实战、Spark集群部署和基本编程、Flink集群部署和基本编程,每章最后均安排有“综合实战”,步骤详细,方便读者进行跟训和实操。
本书内容翔实、案例丰富、操作过程详尽,面向高等院校计算机、大数据、人工智能等相关专业的研究生和本科生,可以作为大数据技术类课程的教材,也可以作为实验指导书或教学辅助用书,同时也可供相关技术人员参考。
图书目录:
第1章部署全分布模式Hadoop集群
1.1初识Hadoop
1.2Hadoop生态系统
1.3Hadoop体系架构
1.4Hadoop部署要点
1.4.1Hadoop运行环境
1.4.2Hadoop运行模式
1.4.3Hadoop配置文件
1.5综合实战:部署全分布模式Hadoop集群
1.5.1规划部署
1.5.2准备机器
1.5.3准备软件环境
1.5.4获取和安装Hadoop
1.5.5配置全分布模式Hadoop集群
1.5.6关闭防火墙
1.5.7格式化文件系统
1.5.8启动和验证Hadoop
1.5.9关闭Hadoop
本章小结
第2章实战HDFS
2.1初识HDFS
2.2HDFS体系架构
2.3HDFS文件存储原理
2.3.1数据块Block
2.3.2副本存放策略
2.3.3数据读取
2.3.4数据写入
2.4HDFS接口
2.4.1HDFSWebUI
2.4.2HDFSShell
2.4.3HDFSAPI
2.5HDFS高可靠性机制
2.5.1HDFSNameNodeHA高可用机制
2.5.2HDFSNameNodeFederation联邦机制
2.6综合实战:实战HDFS
2.6.1启动HDFS集群
2.6.2使用HDFSShell命令
2.6.3使用HDFSWebUI界面
2.6.4搭建HDFS开发环境Eclipse
2.6.5使用HDFSJavaAPI编程
2.6.6关闭HDFS集群
本章小结
第3章MapReduce编程
3.1初识MapReduce
3.2MapReduce作业执行流程
3.3MapReduce入门案例WordCount剖析
3.3.1TokenizerMapper类
3.3.2IntSumReducer类
3.3.3main()函数
3.3.4向Hadoop集群提交并运行WordCount
3.4MapReduce数据类型
3.5MapReduce接口
3.5.1MapReduceWebUI
3.5.2MapReduceShell
3.5.3MapReduceJavaAPI
3.6综合实战:MapReduce编程
3.6.1启动Hadoop集群
3.6.2搭建MapReduce开发环境Eclipse
3.6.3编写并运行MapReduce程序
3.6.4练习使用MapReduceShell命令
3.6.5练习使用MapReduceWebUI界面
3.6.6关闭Hadoop集群
本章小结
第4章部署ZooKeeper集群和实战ZooKeeper
4.1初识ZooKeeper
4.3ZooKeeper工作原理
4.2ZooKeeper数据模型
4.4ZooKeeper部署要点
4.4.1ZooKeeper运行环境
4.4.2ZooKeeper运行模式
4.4.3ZooKeeper配置文件
4.5ZooKeeper接口
4.5.1ZooKeeper四字命令
4.5.2ZooKeeperShell
4.5.3ZooKeeperJavaAPI
4.6综合实战:部署ZooKeeper集群和实战ZooKeeper
4.6.1规划ZooKeeper集群
文档评论(0)