一种基于最小距离索引的对等网系统搜索方法-read.docVIP

基于small-world网络的非结构化DHT算法* 周晋+，李衍达 (清华大学自动化系 北京 100084) (zhoujin00@) 摘要：针对非结构化系统搜索效率过低的问题，提出一种基于聚类分布的DHT算法，基本做法是将一个环状覆盖网络划分为两层，下层负责数据管理，上层负责节点路由，每层在局部节点上以聚类方式组织信息。该算法初步解决了已有非结构化算法的数据组织无序性和搜索盲目性。为了进一步减小搜索路径长度，改进算法利用small-world的研究成果，在HUB层中加入指向远距离节点的远程连接，使得严格聚类转为带有随机性的概率化聚类，从而将搜索路径长度控制在数量级。 关键词：Peer-to-Peer；搜索；聚类分布；small-world；DHT 中图法分类号：TP393 A Peer-to-peer DHT Algorithm Based on Small-world Network ZHOU Jin, LI Yan-Da (Department of Automation, Tsinghua University, Beijing 100084) Abstract To address the inefficiency of existing unstructured algorithms, the paper presents a DHT algorithm based on clustering distribution of indices. The algorithm divides a ring-like key space into two layers. The lower layer is responsible for indices management, and upper layer is responsible for routing nodes. On both layers, indices are clustered within each peer. The algorithm solves the problems of present unstructured algorithms in a certain degree, in which the datum is organized in a confused situation and routing is proceed in a disordered manner. Further, enhanced algorithm uses outcome of small-world to cut down latency of routing hops. With enhanced algorithm, a few connections to remote peers are introduced into routing table with a suitable probability. In another word, the criterion of clustering is not of determination, but of probability. Thus, it is possible to route overlay with average latency of hops. Keywords Peer-to-Peer, route, clustering distribution, small-world, DHT 1 简介 近来，Peer-to-peer系统（简称P2P系统）在文件共享和信息搜索等方面得到了越来越多的应用，Morpheus[1]的系统报告指出：截止2001年10月26日，用户数量超过470,000位，共享文件总量约360TeraBytes。P2P系统是由一组地位相等的节点构成，节点间可以直接通讯，无需第三方参与。与C/S结构相比，P2P结构在可扩展性、数据更新性、可靠性和平衡网络负载能力具有明显优势，为互联网的发展提供了新的契机。 搜索算法是决定P2P系统性能的首要因素。Napster[2]采用了的集中式的目录服务器机制，目录服务器中集中存放了各个节点的地址信息和所保存数据的信息。这种集中式的目录服务器可以对请求进行快速查找并返回最合适的目的节点。但由于Napster搜索机制不属于纯粹的分布式搜索，它依然面临着单节点瓶颈、时效性差、安全性低等一系列难题。 纯粹的分布式搜索算法分为结构化算法和非结构化算法[3]。结构化算法的典型代表包括Tapestry[4] 、Pastry[5]、CAN[6]和Chord[7]，它们严格定义了网络连接的拓扑结构，每个文件必须安放到预先规定好的k