- 1、本文档共17页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
TFS Erasure Code应用实践
阿里云核心系统存储组 张友东
技术博客:
新浪微博:@HUST张友东
TFS应用现状
• Taobao File System
– 分布式文件存储系统
• 数千台存储节点
– 单台11或12块SATA盘
– 600G、1T、2T、4T
– 使用裸盘,不做RAID
• 部署总容量数十PB
– 使用容量约85%
• 存储文件数量超过千亿
– 文本、图片、音乐、APP 、视频等
TFS架构
TFS写流程
1. 分配可写block
Master
Client 2. 返回block位置信息
NS
3
6
7
5. Commit Block
Primary
Replica
3 4 4 3 • NS为写操作分配可写块;为读操
作查询block位置信息
Secondary Secondary • Primary Replica负责将数据写到多
Replica Replica 个Secondary Replica
控制流
数据流
存储成本
存储成本
• 集群内多副本
• 多IDC容灾
同步 备集群、同城
降低成本
主集群 • 优化存储结构 5%
• 利用系统盘 5%
• 应用erasure code 25%
备集群、异地
多副本VS 存储编码
• 3副本
• 容忍2副本失效
• 存储成本3X
• 4 + 2 Reed Solomon
• 容忍2副本失效
您可能关注的文档
- 生物饲料家畜家禽营养生态养殖课件报告教案艾威.pdf
- 生物饲料家畜家禽营养生态养殖课件报告教案安琪酵母:动物肠道健康的营养调控手段.pdf
- 生物饲料家畜家禽营养生态养殖课件报告教案陈代文.pdf
- 生物饲料家畜家禽营养生态养殖课件报告教案康普利德 饲料预消化理论及其研究进展--边连全(20140418)2.pdf
- 生物饲料家畜家禽营养生态养殖课件报告教案铁骑力士PSY30解决方案(2014-3-13)(111简版).pdf
- 托福雅思考试机经攻略秘诀必过策略技巧【9月10日更新】沐沐托福9月12日13日阅读词汇题小范围.pdf
- 托福雅思考试机经攻略秘诀必过策略技巧03沐沐托福独立写作.pdf
- 托福雅思考试机经攻略秘诀必过策略技巧9月沐沐托福阅读词汇题.pdf
- 托福雅思考试机经攻略秘诀必过策略技巧2015年9月沐沐托福阅读+听力(小范围).pdf
- 托福雅思考试机经攻略秘诀必过策略技巧沐沐托福小范围口语音频说明.pdf
- 一病一品护理汇报(手工精品图文).ppt
- 国家义务教育质量监测四年级心理健康测试卷3+问卷(通用版附答案).docx
- 国家义务教育质量监测四年级心理健康测试卷2+问卷(通用版附答案).docx
- 国家义务教育质量监测四年级心理健康测试卷5+问卷(通用版附答案).docx
- 国家义务教育质量监测四年级心理健康测试卷1+问卷(通用版附答案).docx
- 国家义务教育质量监测四年级心理健康测试卷4+问卷(通用版附答案).docx
- 13(猫)第3课时 课件+公开课一等奖创新教学设计.docx
- 孙权劝学 (同步公开课一等奖创新教学设计).docx
- 第17课 要是你在野外迷了路 公开课一等奖创新教学设计.docx
- 统编版(五四制)11古诗二首 池上 公开课一等奖创新教学设计.docx
文档评论(0)