信息检索技术 第三讲 信息检索评价.pdfVIP

信息检索的评价 1 1.1 概述  第二章介绍了各种信息检索模型，怎样才能知道 哪些技术在那些应用中有效？哪些技术在那些应用中有效？  信息检索系统的评价测试集，由三部分组成：  一个文档集合个文档集合 ；  一组用于测试的信息需求的集合，信息需求可以表 示成查询示成查询 ；  一组相关性判定结果，对于每个查询-文档对而言， 通常会赋予通常会赋予一个个二值判断结果值判断结果 ，相关或相关或不相关相关。 2 1.2 测试集文档的人工相关性判定  常规的IR系统评价方法是围绕相关和不相关的概 念展开的念展开的。  对于每个用户的信息需求，人工将文档集中的每 篇文档给出判定结果：相关或者不相关篇文档给出判定结果：相关或者不相关。这些判这些判 定结果称为相关性判定的黄金标准(gold standard)standard)或或绝对真理绝对真理(groun