AI治理人工复核岗作业指导书V1.0.pptx

AI治理人工复核岗作业指导书

9个栏目·共49页

目录

一、目的

二、适用范围

三、术语定义

四、职责分工

五、流程步骤

六、管理要求

七、风险提示

八、检查与考核

九、附则

2/49

一、目的

目的·本节要点

离线验证口径管理目的

标注规则仲裁管理目的

训练数据合法性管理目的

对抗与越狱测试管理目的

3/49

一、目的

离线验证口径管理目的

①离线验证是模型放行前最后一道量化关口，本条统一指标算法与数据切分方法，避免各团队用不同口径各报各数。

②指标可比的前提是验证集同源，本条把验证集冻结与指标定义捆绑管理，二者缺一即视为口径不成立。

③对外引用离线结果必须附口径说明，防止同一模型出现两个互相矛盾的数字。

④口径一旦写入报告首页即锁定，中途想换算法的须重跑全部结果并升版本号，旧口径结果保留在案供对照，不得删除。