搜索引擎评价的研究的方法综述.docVIP

搜索引擎评价的研究的方法综述 　　〔摘 要〕通过ISI Web of Science和中国期刊网查找有关搜索引擎评价研究的文章，本文对搜索引擎评价研究的相关文献进行了梳理，并对研究方法进行了总结。搜索引擎评价研究方法主要有实验法、调查法、观察法、数据分析法、综述和评论等。对比国内外相关研究，国内搜索引擎评价研究数据支撑较为缺乏，科学分析和论证也明显不足。本文旨在提升国内搜索引擎评价研究的科学性。 　　〔关键词〕搜索引擎；评价；研究方法；综述 　　ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１００８－０８２１．２０１０．１２．０４５ 　　〔中图分类号〕Ｇ３５４ 〔文献标识码〕Ａ 〔文章编号〕１００８－０８２１（２０１０）１２－０１６３－０５ 　　Overview of the Methods of Evaluation on Search EngineFei Wei 　　（Suzhou Library，Suzhou 215002，China） 　　 　　〔Ａｂｓｔｒａｃｔ〕The paper reviewd the documents related to the evaluation of search engines based on the ISI Web of Science and CNKI.The methods of these studies were concluded,which were experimentation,survey,observation,data analysis,and review.According to the comparison between domestic and overseas correlational research,the research on the evaluation of search engines was lack of data,as well as scientific analysis and verification.The aim of this paper was to improve the scientificity of the evaluation of search engine in China. 　　〔Ｋｅｙｗｏｒｄｓ〕search engines;evaluation;research method;overview 　　 　　搜索引擎评价研究涉及很多学科，如计算机科学、图书情报科学、统计学、认知科学、电子通讯、机械工程、自动化和控制系统等。ISI Web of Science数据中搜索引擎评价研究涉及到的学科及其分支学科有236个之多（检索时间：2010年10月9日），可见搜索引擎评价研究具有很强的跨学科性质，因而搜索引擎评价的研究方法也不免具有跨学科的特点。Louise提到搜索引擎评价研究方法之一的自然观察法（Naturalistic studies）［１］被心理学家、行为学家和社会学家采用，用来观察其研究对象的自然习惯。Orland总结的纵向研究法（longitudinal studies）［２］，被普遍应用于医学观察，常用于观察某一疾病出现的征兆和症状。还有一些其他的方法被应用于各个领域的研究和实践之中，这些研究方法可以很好地与搜索引擎评价研究相结合，不断充实该领域的研究，也逐步加强搜索引擎评价研究的严谨性和科学性。 　　１ 搜索引擎评价研究方法 　　Louise归纳出搜索引擎评价的研究方法有评论法（Review）、试验法（Experiments）、自然观察法（Naturalistic studies）、调查法（Survey）等。Orland综合了可视化检索系统的评价方法：观察法（Inspection Methods）、实验室研究法（Laboratory studies）、现场实验法（Field Trials）、纵向研究法（Longitudinal Studies）以及系统和日志分析法（Instrumentation and log analysis）等。国内的研究人员也对搜索引擎评价方法进行了归纳总结，如比较分析法和测试实验法［３］，如以描述为主的搜索引擎评价方式，以查询结果的命中个数作为评价标准等［４］。 　　综合国内外关于搜索引擎评价研究，笔者将搜索引擎评价研究方法分为以下几种。 　　１.１ 实验方法 　　实验方法越来越多地被应用于搜索引擎评价的研究，研究人员根据其研究课题，力图探明现象与结果之间的关系。在实验中，研究者首先要提出有关研究目的的问题或假设，并定义变量与自变量，从实验中获取相关数据，通过数据分析来给出问题的答案或论证假设是否成立。实验方法有较强的可控性和操作性，