- 1
- 0
- 约1.12万字
- 约 56页
- 2023-08-01 发布于北京
- 举报
第2章
Hadoop相关项
目介绍
2.1 Hadoop简介
Hadoop为一个分布式系统基础架构,由
Apache 开发。
用户可以在不了解分布式底层细节的情况下,
开发分布式程序,充分利用集群的 高速运
算和 。
Hadoop的基本架构
Hadoop Common :整个Hadoop项目的 。
Avro :Hadoop RPC ( 过程调用)方案。
Chukwa :用来管理大型分布式系统的一个 系统。
HBase :用来支持结构化数据 的分布式数据库,用
Bigtable实现开源。
HDFS :用于提供高吞吐量的分布式文件系统,用GFS实现开源。
Hive :用于提供数据 和查询功能的数据仓库。
MapReduce :为大型数据的分布式处理模型,用
MapReduce实现开源。
Pig :在MapReduce基础上构建的一种高级数据流语言,用
Sawzall实现开源。
Sawzall :建立在MapReduce基础上的领域语言,其程序控
制结构与C语言类似,但代码简洁得多。
ZooKeep
原创力文档

文档评论(0)