lecture6-probmodel【荐】.pdfVIP

Principle of Information Retrieval System 信息检索系统原理 Principle of Information Retrieval System 第6讲概率检索模型 Probabilistic Information Retrieval *改编自王斌网上公开的课件，/~wangbin 信息检索系统原理 内容提要 ①上一讲回顾 ②基本概率统计知识 ③BIM模型 ④BM25模型 2 信息检索系统原理 内容提要 ①上一讲回顾 ②基本概率统计知识 ③BIM模型 ④BM25模型 3 信息检索系统原理 内容提要 ①上一讲回顾 ②基本概率统计知识 ③BIM模型 ④BM25模型 4 信息检索系统原理 补充材料  国防科学技术大学，精品课程  概率论与数理统计  /gltj/index.asp 5 信息检索系统原理 贝努利  瑞士数学家家族，产生过11位数学家  雅可比贝努利(Jacob Bernoulli) : 1654-1705  积分“integral”这一术语即由他首创  贝努利试验、贝努利分布 6 信息检索系统原理 内容提要 ①上一讲回顾 ②基本概率统计知识 ③BIM模型 ④BM25模型 7 信息检索系统原理 概率检索模型  检索系统中，给定查询，计算每个文档的相关度  检索系统对用户查询的理解是非确定的(uncertain) ，对返回结果的猜测也是非确定的  而概率理论为非确定推理提供了坚实的理论基础  概率检索模型可以计算文档和查询相关的可能性 8 信息检索系统原理 概率检索模型  通过概率的方法将查询和文档联系起来  定义3个随机变量R 、Q、D ：相关度R={0,1}，查询 Q={q ,q ,…}，文档D={d ,d , …}，则可以通过计算条件 1 2 1 2 概率P(R=1|Q=q, D=d) 来度量文档和查询的相关度。  概率模型包括一系列模型，如回归模型(Logistic Regression)及最经典的二值独立概率模型BIM、 BM25模型等等(还有贝叶斯网络模型) 。  1998出现的基于统计语言建模的信息检索模型本 质上也是概率模型的一种。 9 信息检索系统原理 概率排序原理(PRP)  简单地说：如果文档按照与查询的相关概率大小 返回，那么该返回结果是所有可能获得结