内容审核模型失误率追踪报告.docxVIP

内容审核模型失误率追踪报告

一、模型失误率概述

（一）统计周期与范围。本报告统计周期为2023年第一季度，覆盖全国31个省市自治区的内容审核模型，涉及新闻、社交媒体、直播、短视频四大类目，日均处理数据量超过10亿条。统计范围包括模型自动审核、人工复核判定为错误的案例，排除因系统维护、数据异常导致的非典型失误。

1.总体失误率数据。本季度模型总体失误率为0.83%，较上季度0.91%下降8.6个百分点，但高于年度目标值0.7%。其中，新闻类目失误率最低为0.62%，社交媒体类目最高达1.15%，直播与短视频类目分别为0.79%和0.88%。

2.失误类型分布。主要失误类型占比排序为：内容误判（占比43%）、尺度把握不当（28%）、规则冲突（19%）、漏审漏判（10%）。内容误判中，政治敏感类错误占比67%，商业侵权类占23%，其他占10%。

3.波动趋势分析。季度内呈现前高后低特征，1月失误率峰值达1.04%，3月降至0.61%。主要受春节假期人工审核资源调配影响，2月因算法调整出现短暂上升后回落。

二、重点类目失误率深度分析

（一）新闻类目失误特征。该类目失误率季度均值为0.62%，主要问题集中于政策解读类稿件。尺度把握不当占比达35%，远高于其他类目。

1.政策解读类失误案例。某地政府工作报告解读稿件被判定为敏感信息，经人工复核确认属事实性报道。此类失误多因模型对政策语境理解不足