信息检索评价要点.ppt

* * * * * * * * * * * * * * * * * * * * * * * * * * * * * Example 1. d123 6. d9 11. d382. d84 7. d511 12. d483. d56 ? 8. d129 ? 13. d2504. d6 9. d187 14. d1135. d8 10. d25 15. d3 ? (33.3%,33.3%) (25%,66.6%) (20%,100%) * 其他测度方法 (cont.) E指标 允许用户根据需要调整精确率和召回率的比例 * 其他测度方法(cont.) 面向用户的测度方法 覆盖率：实际检出的相关文献中用户一致的相关文献所占比例 新颖率：检出的相关文献中用户未知的相关文献所占的比例 * 图示覆盖率和新颖率 相关文献|R| 结果集|A| 用户已知的相关文献|U| 检出的用户以前未知的相关文献|Ru| 检出的用户已知的相关文献|Rk| * 测试集 (Test Collections) 组成要素 文件集 (Document Set; Document Collection) 查询问题 (Query; Topic) 相关判断 (Relevant Judgment) 用途 设计与发展: 系统测试 评估: 系统效能(Effectiveness)之测量 比较: