- 1、本文档共14页,其中可免费阅读5页,需付费49金币后方可阅读剩余内容。
- 2、本文档内容版权归属内容提供方,所产生的收益全部归内容提供方所有。如果您对本文有版权争议,可选择认领,认领后既往收益都归您。
- 3、本文档由用户上传,本站不保证质量和数量令人满意,可能有诸多瑕疵,付费之前,请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形,可联系本站下载客服投诉处理。
- 4、文档侵权举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
PAGE1
PAGE1
分布式存储系统:HDFS:HDFS高级特性:ErasureCoding
1分布式存储系统简介
1.1HDFS架构与原理
HDFS(HadoopDistributedFileSystem)是Hadoop项目的核心子项目之一,旨在为海量数据提供高吞吐量的访问,适合一次写入多次读取的场景。HDFS的设计目标是高容错性,能够部署在廉价的硬件上,同时提供高吞吐量来访问应用程序的数据,适合拥有超大数据集的应用程序。
1.1.1架构组成
HDFS采用主从(Master/Slave)架构,由一个NameNode和多个DataNode组成:
NameNode:
您可能关注的文档
- 大数据基础:大数据概述:大数据在行业中的应用案例.docx
- 大数据基础:大数据概述:机器学习在大数据中的应用.docx
- 大数据基础:大数据概述:数据流处理与Storm.docx
- 分布式存储系统:Amazon S3:AmazonS3架构与原理.docx
- 分布式存储系统:AmazonS3:S3对象操作与管理.docx
- 分布式存储系统:AmazonS3:S3访问控制与安全策略.docx
- 分布式存储系统:AmazonS3:S3生命周期策略与成本管理.docx
- 分布式存储系统:AmazonS3:S3事件通知与监控技术教程.docx
- 分布式存储系统:AmazonS3:S3数据备份与恢复技术教程.docx
- 分布式存储系统:AmazonS3:S3数据模型与存储类别.docx
- 分布式存储系统:HDFS:HDFS高级特性:Federation.docx
- 分布式存储系统:HDFS:HDFS高级特性:HA.docx
- 分布式存储系统:HDFS:HDFS架构与原理.docx
- 分布式存储系统:HDFS:HDFS命名空间管理技术教程.docx
- 分布式存储系统:HDFS:HDFS容错与恢复机制.docx
- 分布式存储系统:HDFS:HDFS生态系统:Hadoop工具与应用.docx
- 分布式存储系统:HDFS:HDFS数据存储机制.docx
- 分布式存储系统:HDFS:HDFS数据块管理.docx
- 分布式存储系统:HDFS:HDFS数据流读取流程.docx
- 分布式存储系统:HDFS:HDFS数据流写入流程技术教程.docx
文档评论(0)