基于语言建模IR模型LanguageModelsforIR.pptxVIP

第12讲 基于语言建模的IR模型 Language Models for IR;提纲;提纲;概率检索模型;概率排序原理(PRP);几种概率检索模型;Logistic 回归IR模型;BIM模型(续);BIM模型(续);pi qi参数的计算;pi qi参数的计算(续);pi qi参数的计算(续);Okapi BM25: 一个非二值模型;本讲内容;提纲;统计语言模型(Statistical Language Modeling，SLM);类比：打扑克中的出牌策略;不同模型的例子;课堂思考;SLM的一个应用例子;SLM的一个应用例子(续);SLM的参数估计;23;24;25;统计语言建模IR模型(SLMIR);从一个问题开始;和检索的类比;总体分布抽样;查询似然模型(Query Likelihood Model);查询似然模型QLM;QLM概念理解;QLM求解步骤;MD的估计;MD的MLE估计;总体分布MD的假设;文本生成的多项式模型;多项随机试验;多项随机试验(续);MD的参数求解;一个MLE估计的例子;MLE估计的零概率问题;MLE估计零概率的一个例子;例子(续);例子中的MLE估计;数据平滑的一般形式;几种QLM中常用的平滑方法;QLM的求解过程图示;文档排名函数的转换;QLM模型小结;基本SLMIR模型的扩展;其它SLMIR模型;香农(Shannon)信道;基于翻译模型的IR模型;K