第8讲 检索评价结果摘要evaluation snippe到ts 1.pptx

第8讲 检索评价结果摘要 Evaluation Snippets;提纲;提纲;4;5;6;堆结构;8;本讲内容;提纲;关于评价;从竞技体育谈起;为什么要评估IR？;IR中评价什么？;如何评价效果？;评价任务的例子;评价的几部分;提纲;评价指标分类;评价指标分类;回到例子;整个文档集合的划分;评价指标;四种关系的矩阵表示;基于集合的图表示;回到例子;课堂提问：另一个计算例子;正确率和召回率的应用领域;关于正确率和召回率的讨论(1);关于正确率和召回率的讨论(2);31;课堂提问：;回到例子;正确率和召回率的问题;关于召回率的计算;4个系统的Pooling;课堂提问;P和R融合;39;40;41;42;43;引入序的作用(1);引入序的作用(2);P-R曲线的例子;P-R曲线;P-R 曲线的插值问题;P-R曲线图;P-R的优缺点;基于P-R曲线的单一指标;P-R曲线中的break point;引入序的作用(3);不考虑召回率;回到例子;评价指标分类;评价指标(9);回到例子;课堂提问：;整个IR系???的P-R曲线;几个IR系统的P-R曲线比较;面向用户的评价指标;其他评价指标;其他评价指标;近几年出现的新的评价指标;Bpref;原始定义;特定情况;最新定义;GMAP;GMAP;NDCG;NDCG;NDCG;NDCG;NDCG;NDCG;另一种NDCG的计算方法;关于评价方面的研究;提纲;TREC 概况;TREC的目标(1);TREC的目标(2);TREC的运行方式(1);TREC的运行方式(2);TREC的运行方式(3);TREC的运行方式(4);测试数据和测试软件;TREC任务情况;历届TREC参加单位数示意图;参加过TREC的部分单位;TREC中名词定义;Topic的一般结构;Topic示例;使用Topic的方式;评测方法;相关性评估过程(1);相关性评估过程(2);其他评测会议;TRECVID (TREC VIDeo);MUC (Message Understanding Conference);ACE(Automatic Content Extraction);DUC(Document Understanding Conference);其他评测;105;106;107;108;109;110;111;112;113;提纲;115;116;117;118;119;120;121;122;123;本讲小结;125;课后练习