垂直搜索引擎中过滤器的设计与实现.pdfVIP

整理及推荐:空调过滤器 有隔板高效过滤器/modpic-8/ 高效过滤器检漏/news-2/ 无隔板高效过滤器/modpic-9/ 第26卷第 l2期 计算机应用与软件 Vo1．26 No，12 2009年 12月 ComputerApplicationsandSoftware Dec．2009 垂直搜索引擎 中过滤器的设计与实现 梁党卫 彭文滔 边利亚 (胜利油田有限公司物探研究院 山东 东营257000) (上海大学计算机工程与科学学院 上海 200072) 摘 要 从海量Web资源中高效、快捷地检索信息的常规的方法是搜索引擎和信息抽取等技术，而过滤器则起着重要的Web网 页预处理作用。提 出了基于DOM树结构的过滤器方法，讨论 了垂直搜索引擎中页面预处理的方法、设计与实现，并给出了具体的实 现算法。最后结合在石油领域垂直搜索引中的具体应用，总结了过滤器适应于当前网页的结构和设计的特点，验证了方法的正确性 和适用性，大大提高了垂直搜索引擎的效率和准确率。 关键词 网页预处理 过滤器 DOM 搜索 J擎 DESIGNING AND IMPLEMENTING THE FILTER oF VERTICAL SEARCH ENGINE LiangDangwei PengWentao BianLiya (GeophysicalResearchInstituteofShengliOilField，Dongying257000，Sandong，China) 。(SchoolofComputerEngineeringand~ienee，ShanghaiUniversity，Shanghai200072，China) Abstract Conventionalmethodoffastandefficientlyretrievinginformationfrom massWebresourcesisthetechniqueofsearchengines andinformationextraction，etc．，andthefilterplaysanimportantroleinpre—treatingtheWebpages．Inthispaperweproposeafihermethod basedonDOM treestructure，discussthepre—treatmentapproach，designingandimplementationofthepagesinverticalsearchenginewitha concreterealisationalgorithm．Atlast，wesummarisethesturctureanddesigncharacteristicsofthefilteradaptingtothecurrentwebsiteincon- junctionwiththespecificapplicationoftheverticalsearchengineinoilfield，andvalidatethecorrectnessandapplicabilityoftheme~od．The searchengineefficiencyandaccuracyhavebeengreatlyimproved． Keywords Pagepretreatment Filter DOM Searchengine 通用网页更为详尽的信息，如石油开采、开发技术，国内外石油 0 引 言 形势、新闻等，而不是像 Google那样内容泛泛的介绍性网页。 换句话说，石油垂直搜索引擎，用户需求较为明确，搜索范围相 随着互