信息获取系统评价RetrievalEvaluation.pptVIP

4. 检索评价Retrieval Evaluation 简介 系统评价 功能方面 性能方面 检索性能评价 IR系统需要评价结果集的准确度 评价一个IR系统 功能评价 功能性分析 系统是否提供了用户所希望的大多数功能？ 系统提供了什么独特的功能？ 系统是否用户友好？ 错误分析 系统查询结果失败的频率怎样？ 用户使用系统是不是容易出错？ 性能评价 给定一个查询，系统性能怎样？ 如何定义查询性能？ 查询目标是不是检索所有相关信息？ 有没有可能知道系统找到了所有相关信息？ 给定用户的信息需求，系统性能如何？ 找到的信息是否有用? -- 相关性relevance 相关性Relevance Relevance — 词典定义: Pertinence to the matter at hand 相关性，和手头的事务的相关 Applicability to social issues 实用性，对社会事务的适用 The capability of an information retrieval system to select and retrieve data appropriate to a users needs. 信息检索能力，信息检索系统选择和获取适合用户需要的信息的能力 IR里的相关性 对搜索结果的一种度量 判断什么应该被检索，什么不应该被检索 没有简单的标准说明什么是相关的什