大模型微调数据集构建手册.docx

PAGE

大模型微调数据集构建手册

目录TOC\o1-4\z\u

一、大模型微调数据集概述 4

二、微调任务与数据集适配原则 7

三、数据需求调研与场景拆解 11

四、数据来源筛选与合规核验 14

五、多模态数据类型分类标准 17

六、原始数据采集方法与工具 20

七、原始数据清洗流程规范 22

八、数据标注体系设计原则 27

九、标注人员管理与质量管控 30

十、领域知识数据专项处理 34

十一、对话类数据格式对齐规则 36

十二、指令微调数据构造模板库 39

十三、偏好数据排序与对齐方法 42

十四、数据脱敏与隐私保护

文档评论(0)

1亿VIP精品文档

相关文档