对等网络下信息检索和动态副本策略的研究与实现-系统工程专业论文.docxVIP

独创性声明 本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研 究成果。尽我所知，除文中已经标明引用的内容外，本论文不包含任何其他个人或 集体已经发表或撰写过的研究成果。对本文的研究做出贡献的个人和集体，均已在 文中以明确方式标明。本人完全意识到，本声明的法律结果由本人承担。 学位论文作者签名： 日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，即：学校有权 保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。 本人授权华中科技大学可以将本学位论文的全部或部分内容编入有关数据库进行检 索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。 保密□ ，在 年解密后适用本授权书。 不保密□。 （请在以上方框内打“√”） 学位论文作者签名： 指导教师签名： 日期： 年 月 日 日期： 年 月 I I 摘要 随着互联网技术的飞速发展和迅速普及，传统的分布式存储应用面临巨大的挑 战。如何充分利用网络环境中的信息资源，成为互联网发展的关键。对等网络技术 的产生为网络存储提供了新的解决思路。 本文的主要目的是利用对等网络技术有效的组织利用网络中分散的计算机资源， 利用节点的空闲空间为用户提供一个超大容量的虚拟存储空间。用户可以在系统中 存储和交换资源，为用户提供可靠的、高性能、廉价的存储服务。同时引入高效的 信息检索策略和动态副本策略以提高系统的性能。 本文全面系统的分析了对等网络技术的基础上，主要研究了对等网络技术中的资 源检索和副本策略。并在此基础上设计并实现了一个分布式存储系统。系统采用两 层对等网络体系结构。系统中的节点分为超级节点和普通节点，系统上层网络是由 超级节点组成的非结构化对等网络，下层网络是普通节点组成的集中式网络。普通 节点都由组内的超级节点统一管理。同时将区域索引和语义分组引入到非结构化对 等网络搜索技术中，结合洪泛搜索机制，提出了基于语义分组区域的资源搜索策略。 并对算法进行仿真分析，证明算法的有效性。设计并实现了系统的副本冗余模块。 结合时间序列平滑算法和文件访问的历史记录来预测热点副本文件，利用节点性能 公式来计算节点性能，将热点文件存放在高性能节点上，提出了一种基于时间序列 平滑算法预测的动态副本管理机制。 关键词： 对等网络，分布式存储，信息检索，动态副本管理 II II Abstract With the rapid development and wide popularization of the network technology, traditional distributed storage applications faces enormous challenges. It has become a key to the development of the Internet how to make full use of information resources under the network environment. The peer to peer (P2P) technology provides some fresh light on networked storage. The main purpose is to provide a super-capacity virtual storage space using effectively the P2P technology and the free space of nodes for the user in the network in this paper. Users can store and exchange resources in the system. It provides a reliable and inexpensive service to users through bringing efficient information retrieval strategy and dynamic replication strategy into distributed storage system. On systematically analyzed the P2P network technology basis, we study the resource retrieval and replication strategy on P2P network. It uses two layers architecture. The nodes are divided into super nod