基于网格技术的并行搜索引擎.pdfVIP

第 35卷 第6期 计 算 机 工 程 2009年3月 M arch2009 Vo1．35 No．6 ComputerEngineering ·开发研究与设计技术 · 文章缩号tl0o-3428(2帅9)o每__0257一 + 文献标识码：A 中圈分类号tTP393 基于网格技术的并行搜索引擎 高 龙，贾 宏，月 俭 (华北计算技术研究所地理信息与数据库研究室，北京 100083) 摘 要：研究现有网格技术和搜索技术 ，分析并行搜索引擎的优点和不足，提 出基于网格技术的并行搜索引擎解决方案，其中包含一个 3层结构的应用框架和一个并行搜索引擎的应用方案。根据该方案实现并部署一个基于网格的并行搜索引擎——MSE1．0，获得了较好的检 索结果。 关健诃：并行搜索引擎；网格技术；Web服务 ParallelSearchEngineBasedonGridTechnologies GAOLong，JIAHong，ZHOUJian (LabofGeographicInformationDatabase．NorthChinaInstituteofComputingTechnology,Beijing100083) [Abstract]Thispaperstudiescurrentgridtechnologiesandsearchtechnologies，naalyzestheadvnatagesnaddisadvnatagesofparallelsearch engineandadvnacesthesolution schemeofparallelserachenginebasedon dwhichincludesathree—tiered frameworkofapplicationanda praallelserachengineprojectofapplication．ItrealizesnaddeployshteMSE1．0whichisapraallelserachenginebasedon daccordingtothis scheme．and0btainsabetterserachresults． [Keywordsipraallelsearchengine；gridtechnologies；Webservices 1 概述 目前 的开 放 网格 服 务 结 构 (Open Grid Services 网格是伴随互联网技术发展起来的。共享与协同是网格 Architecture，OGSA)是在原有 “沙漏结构”的基础上，结合最 的本质问题，共享是搜索引擎的核心思想，协同是并行技术 新的Web服务技术提出的I。OGSA包括2大关键技术。即 的关键。其最初是专门针对复杂科学计算应用的一种新型计 网格技术和 Web服务技术。根据服务为中心是OGSA的基本 算模式。它把分散在不同地理位置的资源虚拟成为一个强大 思想，在开放网格服务结构中，计算机设备、应用程序、数 的信息系统，从而实现计算资源、存储资源、数据资源、信 据以及仪器、设备等都被抽象为服务，以便于通过统一的标 息资源、软件资源、通信资源、知识资源、专家资源的全面 准接口来管理和共享网格上功能各异的资源。其中，Web服 共享和协同解决问题。用户可以从中享受一体化、动态变化、 务使用基于 XML的消息处理作为基本的数据通信方式；底 可灵活控制、智能、协作式的信息服务。该系统具有使用方 层采用HTTP等通信协议；上层采用面向应用的SOAP作为 便和应用能力强等特点。