搜索引擎质量评价的体系实证分析的研究.pdfVIP

搜索引擎质量评价体系实证分析研究 摘要 搜索引擎是当今网络信息检索的主要工具，它在满足人们从互联网上快速、 准确、全面的获取信息的需求方面发挥了重要的作用。但是，由于各种搜索引 擎所采用的技术和服务对象的不同，它们之间的各项性能差异很大。因此，通 过对搜索引擎进行合理的评价，不仅有利于用户的选择与使用，而且有利于其 本身的改进和发展。目前大多数评价方法主要以描述为主，通常只能对搜索引 擎进行定性或部分定量描述，不能系统、全面的对不同搜索引擎进行综合评价。 因此，建立搜索引擎综合评价体系，通过定性描述和定量分析两个角度对搜索 引擎进行综合评价，具有较大的现实意义和应用前景。 本文参阅了大量国内外学者关于搜索引擎质量评价体系的文献，借鉴了其 中比较合理的成分，提出了一套相对比较科学、合理的搜索引擎质量评价指标 体系。 通过此搜索引擎质量评价指标体系，对Google中文、雅虎和百度进行了较 为详细的比较和评价，分别对它们的数据库规模和内容、检索功能、检索结果 显示、用户界面4个方面进行了比较详细的定性分析和比较，方便了人们更好 的了解和选择搜索产品。 通过此搜索引擎质量评价体系，定量的分析了它们的检索性能。选择了lO 个检索主题，分别对它们在Google中文、雅虎和百度中的检索结果进行了分析 和比较。仔细判断每个搜索引擎的前20个检索结果与检索课题的相关性，计算 出前20命中记录查准率。实验结果表明，Google中文的检索性能优于雅虎和 百度。 指出了雅虎和百度的检索性能低于Google中文的原因：由于它们存在竞价 排名。虽然短期来说竞价排名能为搜索引擎公司赢得更多的利润，但从长远角 度考虑，并不利于公司的发展，因为竞价排名影响了用户的搜索体验。 关键词：搜索引擎；评价体系：Google中文：雅虎；百度 第一章 前言 搜索引擎是当今网络信息检索的主要工具，它在满足人们从互联网上快速、 准确、全面地获取信息的需求方面发挥了重要的作用。合理地评价一个搜索引 擎，不仅有利于用户的选择与使用，而且有利于其本身的改进和发展。目前大 多数评价方法主要以描述为主，通常只能对单个搜索引擎进行各因素的定性或 部分定量描述，不能系统、客观地对搜索引擎进行综合评价。因此，建立搜索 引擎综合评价体系，通过定性描述、定量分析的方式评价搜索引擎的综合性能， 具有较大的现实意义和较好的应用前景。【l】 1．1研究现状 随着因特网上信息量的几何级数的递增，搜索引擎己成为用户查找网上信 息必不可少的检索工具，网络用户因此面临一个如何选择搜索引擎的问题，因 此对搜索引擎进行质量评价研究也逐渐受到重视。但由于网络“海量”信息的 特点使得大多数传统的信息检索指标难以量化，因此国内很多学者对中文搜索 引擎进行评价时往往避开定量指标，仅从定性方而进行评述。最近国内有学者 提出了“相对查准率”的概念和计算方法，本文尝试运用这些定量指标、综合 一些学者提出的指标体系，对中文搜索引擎的评价体系进行了探索。一方面检 验本文所采用的指标体系的科学性、合理性、有效性，为今后的搜索引擎性能 评价研究提供参考，另一方面为中文搜索引擎检索技术的优化、改进提供理论 和事实依据。121 1．1．1定性研究 很多学者都在搜索引擎定性评价方面进行了研究，其中王启云归纳了一个 搜索引擎应具有以下几点：1)具有全文搜索功能；2)具有目录式分类结构；3) 在分类中实现全文检索；4)查询速度快、性能稳定可靠，可维护性好。f3J宛玲 等主要针对中文搜索引擎评价标准进行探讨，认为对中文搜索引擎的检索功能 的评价主要应从收录范围、查询结果反馈信息的质量、检索款目的信息量、差 错率、更新与报道速度、查询功能、检索界面的友好性、精品推荐、与其它搜 索引擎友情链接、响应速度等多方面进行。14J段宇峰从理论和应用的角度探讨 了评价搜索引擎的关键词检索功能的指标体系：检索界面的用户有好性、检索 能力(逻辑组配功能、截词功能、限定检索、精确检索、位置检索、相关检索、 智能检索)、检索结果的输出。【5】贾红英在对网络搜索引擎的现状、工作过程、 类别以及几个中文网站的搜索引擎进行分析的基础上，总结出搜索引擎的评价 标准：1)分类系统的合理性、分类的广度和深度、限制在类别内的搜索能力； 2)搜索引擎收集的网站或网页数日；3)搜索引擎搜索结果的满意度(包括查 询结果相关项的数量、死链接和重复链接的数量