HDFS的写操作实例
1、了解HDFS的写操作实例
01目录 HDFS的写操作实例
HDFS的写操作实例 前提: 有一个文件FileA,100M大小。Client将FileA写入到HDFS上。 HDFS按默认配置。 HDFS分布在三个机架上Rack1,Rack2,Rack3。
HDFS的写操作实例 步骤: 1) Client将FileA按64M分块。分成两块,block1和Block2; 2) Client向nameNode发送写数据请求,如图蓝色虚线①------。
HDFS的写操作实例 3) NameNode节点,记录block信息。并返回可用的DataNode 如粉色虚线②---------。 Block1: host2,host1,host3 Block2: host7,host8,host4
HDFS的写操作实例 原理: NameNode具有RackAware机架感知功能,这个可以配置。 若client为DataNode节点,那存储block时,规则为:副本1,同client的节点上;副本2,不同机架节点上;副本3,同第二个副本机架的另一个节点上;其他副本随机挑选。 若client不为DataNode节点,那存储block时,规则为:副本1,随机选择一个节点上;副本2,不同副本1,机架上;副
您可能关注的文档
- HDFS支持的文件格式.pptx
- 二零二三年 优质公开课hdfs放置策略.pptx
- HDFS数据组织和数据块.pptx
- HDFS数据读写过程.pptx
- HDFS文件块的大小.pptx
- 二零二三年 优质公开课HDFS文件复制.pptx
- HDFS文件权限精品获奖.pptx
- 二零二三年 优质公开课hdfs文件权限.pptx
- 二零二三年 优质公开课HDFS文件系统.pptx
- 二零二三年 优质公开课HDFS权限.pptx
- 全文可编辑培训课件-机构研究报告-德国数字音乐用户分析报告:deezer -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国退休用户分析报告-外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国洗衣机用户分析报告:candy -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国新闻日报用户分析报告:koelner stadt anzeiger-外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国新闻日报用户分析报告:westdeutsche allgemeine zeitung leserinnen -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国移动运营商用户(联通)分析报告:alditalk -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国移动运营商用户(联通,电信)分析报告:alditalk -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国数字音乐用户分析报告:apple music itunes -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国洗衣机用户分析报告:beko -外文培训课件.pptx
- 全文可编辑培训课件-机构研究报告-德国洗衣机用户分析报告:miele -外文培训课件.pptx
原创力文档

文档评论(0)