自然语言处理在信息检索中的应用综述.pdfVIP

第 2 1 卷 　第 2 期 中文信息学报 Vol . 2 1 , No . 2 2007 年 3 月 J OU RN AL O F C H IN ESE IN FO RMA T ION PROCESSIN G Mar . , 2007 文章编号 : (2007) 自然语言处理在信息检索中的应用综述 王灿辉 , 张 敏 , 马少平 (清华大学 计算机科学与技术系 ,北京 100084) ① 摘 　要 : 在信息检索 发展的过程中 ,研究者们不断尝试着将 自然语言处理应用到检索里 ,希望能够为检索效果提 高带来帮助 。然而这些尝试的结果大多和研究者们最初的设想相反 , 自然语言处理在大多数情况下没有改进信息 检索效果 ,甚至反而起了负面作用 。即便有一些帮助 ,也往往是微小的 ,远远不如 自然语言处理所需要的计算消耗 那么大 。研究者们对这些现象进行了分析 ,认为 : 自然语言处理更适合于应用在需要精确结果的任务中 ,例如问答 ( 系统 、信息抽取等 ; 自然语言处理需要针对信息检索进行优化才可能发挥积极作用 。最新的一些进展 例如在语言 ) 模型中加入 自然语言处理 在一定程度上印证了这一结论 。 关键词 : 人工智能 ; 自然语言处理 ;综述 ;信息检索 中图分类号 : TP39 1 　　　　文献标识码 : A A Survey of Natural Language Processing in Inf ormation Retrieval WAN G Canhui , ZHAN G Min , MA Shaoping (Dep art ment of Comp ut er Science and Technology , Tsinghua U niver sit y , Beij ing 100084 , China) Abstract : Nat ural language p rocessing (NL P) ha s been u sed in information ret rieval ( IR) by researcher s , in t he hop e of imp roving ret rieval effect . But mo st of t he result s are in t he oppo sit e way hypot hesized . In mo st ca ses , NL P didn ’t yield increa ses in IR p reci sion but took a negative effect . Even if NL P help ed IR under some circumst ances , t he imp rovement s were much smaller t han t he p rocessing co st needed by NL P . Researcher s p erform analy si s on t hese p henomena and come to t he conclu sion t hat : IRrelat ed t a sk s t hat acquire accurat e result s , such a s question