推荐系统评价指标规范.pptxVIP

推荐系统评价指标综述 汇报人：李烽 文献来源： 朱郁筱,吕琳媛. 推荐系统评价指标综述[J]. 电子科技大学学报,2012,02:163-175. 研究背景 3 信息过载 多种推荐算法 孰优孰劣 研究背景 4 Web2.0时代，每个人既是信息接收者，也是信息创造者。信息数量庞大但质量参差不齐，造成信息过载。 信息过载 多种推荐算法 信息过滤，为满足用户需求推荐个性化推荐。协同过滤算法、基于内容的推荐算法、混合推荐算法。。。 孰优孰劣 如何有效、客观评价推荐系统的效能，从实验室到实际应用的转换。 研究背景 评价方法 6 设计在线用户实验，根据用户在线实时反馈或事后问卷调查等结果来衡量推荐系统的表现 A/B测试 高额成本 根据待评价的推荐系统在实验数据集上的表现来衡量推荐系统的质量 方便、经济 数据集的划分（常用随机划分）与评价指标的选择 评价指标 7 准确度指标 基于排序加权的指标 覆盖率 多样性和新颖性 准确度指标 预测评分的准确度 衡量算法预测的评分与用户实际评分的贴近程度 思路：计算预测评分和用户真实评分的差异 局限：对MAE指标贡献大的往往是那种很难预测准确的低分商品 预测评分的准确度 MSE和RMSE指标对每个绝对误差首先做平方运算，所以这两个指标对比较大的绝对误差有了更重的惩罚 预测评分的准确度 预测评分关联 衡量算法预测的评分与用户实际评分之间的相关性 最常见的三种相关