基于大规模问答对数据的查询扩展技术研究.pdfVIP

情 报 学 报 ISSN1000—0135 JOURNAL0FTHECHINA S0CIETYF0R SCIENTIFIC AND TECHNICALINFORMATION ISSN 1O0o一0135 第31卷 第 4期 407—415，2012年 4月 Vo1．31 No．4，407—415 April 2012 doi：10．3772／j．issn．1000-0135．2012．04．009 基于大规模 问答对数据的查询扩展技术研究 王君泽 张 祥 徐晓林 (1．华中科技大学公共管理学院，武汉 430074；2．华中科技大学电子与信息工程系，武汉 430074) 摘要 查询扩展是信息检索领域中的一个热门话题，其 目标是将与初始查询词相关的其他单词添加到初始查 询请求 中，以更详细地描述用户 的信息需求 。本文将查询过程视为特殊的问答过程 ，并基于此思想提 出一种新 的 查询扩展方法。本文的贡献主要有 以下几点 ：① 借助统计语言模型从大规模 问答对数据中挖掘单词之间的扩展关 系，并根据单词间的扩展关系对候选扩展词进行评级；② 提出一个新的查询扩展词选取策略，以克服 已有查询扩展 方法仅依赖评级的扩展词选取策略的不足 。通过在真实数据集合上 的实验 ，证 明本文提 出的查询扩展方法可 以取 得优于传统方法 的性能 ，具有一定 的实用性。 关键词 查询扩展 信息检索 问答数据 语言模型 TheStudyontheQueryExpansionTechniqueBasedonQAData W angJunze ，ZhangXiang andXuXiaolin (1．CollegeofPublicAdministration，HuazhongUniversityofScienceandTechnology，Wuhan430074，China； 2．DepartmentD厂ElectronicsandInformationEngineering，HaazhongUniversityofScienceandTechnology，Wuhan430074，China) Abstract Queryexpansiontechniqueisahottopicininformationretrieva1．Theaimofthistechniqueisaddtermsin theoriginalquerytoformasuitablequery．Inthisarticle，weviewthequestionpartandtheanswerpartofQApairsina hugeQAarchiveasqueryandthewebpagesthatsatisfiedtheinformationneedinthequery．Thecontributionofthispaper is：① usingastatisticallanguagemodeltominetheexpansionprobabilitybetweenwords，and② proposeacandidate expansionwordsselection approach toofrm thenew query toavoidtheshortcomingsofthepriorquery expansionmethods． Theexperimentalresultson arealdata setshow thatourapproachperformsbetterthan thetraditionalquery expansion techniques． Keywords queryexpansion，informationretrieval，QAdata，languagemodel