在数据网格环境中可靠获取分布式数据的方法.pdfVIP

第27卷第11期 通信学报 Vbl．27No．1l 2006年11月 JoumalonCommuIlications NoverIlber2006 在数据网格环境中可靠获取分布式数据的方法 叶炜，顾宁 (复旦大学计算机与信息技术系，上海200433) 摘要：为了保证数据密集型网格中的数据的可获取性，采用对数据资源增加存储副本的方法，提出了一种数据 密集型网格环境下的大数据分片存储及散发方法，并设计了一种数据自动复制及散发模型。初步实验表明该方法 能够以较小的系统代价大幅度提高数据的可获取性。 关键词：分布式数据存储；网格；数据获取 中图分类号：TP302 文献标识码：A RobustdistributeddataretrieValindataintensiVe grid YEW西，GUNing Inf0咖撕on (D印t．ofC伽叩udng柚d 1khnology，Fud柚university，Sh姐ghai200433，China) Ab!蹰隐ct：hlordertoensuredata indataintensive data solu廿on吐lat aVailability gridenVironment，byaddingreplicas，a data for fiksin幻da土ab10ckS粕ddis廿ibutesover nodes waS amechaIlismfor卸to- 矧peslarge storagepmposed，锄d rm畸c ofnodeswas simula矗on showtllat ise丘bcdVein expeIiments data∞plication desighed．PreliIIlinary our铒proach data hmitedincreaseof costs． iII】IprovingaVailabili哆wittl system words：dis仃ibuteddata retrieval Key storage；grid；data 分布式存储系统原则上可以提供低成本、大容量的 1 引言 存储支持(100万台个人计算机可以提供1—10PB 网格【l’2】作为一种分布式计算及资源共享技术， 的存储空间)、集合的计算能力及超大的集合网络 把分布在不同地理位置的各种不同资源集成起来， 带宽。然而，在数据密集型网格系统的实现过程中 互相协作以解决更为复杂的问题。近年来，随着网 遇到了一系列棘手的问题，例如存储节点异常失 格技术的迅速发展，网格应用领域也在迅速扩展， 效，节点的动态加入与退出及网络连接的不稳定性 特别是，越来越多的网格应用依赖于海量的网络存 等。这些问题极大的影响了数据的可获取性，因此 储空间。数据密集型网格正是为了解决这～问题而 阻碍了数据密集型网格的应用。 提出，主要解决大规模分布式数据存储环境下的高 P2P领域的研究者们在提高数据可获取性方面 效可靠的数据共享问题。