一种跨犎犇犉犁集群地文件资源调度机制.PDFVIP

第 卷 第 期 计 算 机 学 报 ４０ ９ 　 　　 　　 　　 　　 Ｖｏｌ．４０ Ｎｏ．９ 年 月 ２０１７ ９ Ｓｅｔ．２０１７ ＣＨＩＮＥＳＥＪＯＵＲＮＡＬＯＦＣＯＭＰＵＴＥＲＳ ｐ 　 一种跨犎犇犉犛集群的文件资源调度机制 ），） ） ），） ） ） ） １ ２ ２ １ ２ １ ３ ４ 胡 博 陈 桓 张良杰 牟建伟 戴广立 马于涛 　 　 　 　 　 １）（金蝶软件（中国）有限公司大数据云平台部 广东 深圳 ５１８０５７） 　 　 ２）（金蝶软件（中国）有限公司国家企业互联网服务支撑软件工程技术研究中心 广东 深圳 ５１８０５７） 　 　 ３）（东南大学计算机科学与工程学院 南京 ２１１１８９） 　 　 ４）（武汉大学软件工程国家重点实验室 武汉 ４３００７２） 　 　 摘 要 集群文件系统作为一种典型的分布式文件系统类型，通过集群内多个节点的协同，消除了单点故障以及 　 　 性能瓶颈问题，实现了高可用、高性能以及动态负载均衡，并且具有较高的可扩展性，因此常作为实现和提供云存 储服务的关键技术之一 该文针对 集群主要局限于同一数据中心内部部署且可扩展性受限的问题，提出一 ． ＨＤＦＳ 种跨数据中心集群部署的文件资源调度机制和金蝶分布式文件服务 ＫＤＦＳ，通过分布式架构再设计，支持多个 ＨＤＦＳ集群动态组网协同工作；通过引入文件资源池，屏蔽了不同集群之间的文件差异性，能够面向多应用提供透 《 明服务；通过引入弹性存储与最优存储策略，确保集群资源安全冗余与就近服务的同时提升了集群的存储效率 实 ． 验和实践证明，跨 ＨＤＦＳ集群的文件资源调度机制不但解决了 ＨＤＦＳ集群可扩展性受限的问题，同时通过跨数据 中心部署，实现了集群文件异地冗余灾备、跨数据中心负载均衡以及文件就近存取服务，有效地提高了应用使用 ＫＤＦＳ存储服务的体验． 计 算 关键词 集群文件系统；分布式文件系统； ；文件资源调度；云存储 ＨＤＦＳ 　 中图法分类号 号 ／ ＴＰ３１１