机器学习训练数据集的质量控制与生命周期管理.docxVIP

机器学习训练数据集的质量控制与生命周期管理

目录

文档简述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

机器学习数据集生命周期概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.1数据集产生的阶段．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.2数据集生命周期的意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

数据集质量评估标准．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

3.1数据完整性评估．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

3.2数据一致性评估．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

3.3数据准确性评估．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

数据集质量控制方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

4.1数据清洗技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

4.2数据增强策略．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

4.3众包数据质量控制．