YDT 3762-2020 大数据 数据挖掘平台技术要求与测试方法.pdf

ICS 35.020 L70 YD 中 华 人 民 共 和 国 通 信 行 业 标 准 YD/T 3762—2020 大数据 数据挖掘平台技术要求与测试 方法 Big data - technical specification and test methods on data mining platform 中华人民共和国工业和信息化部 发 布 YD/T 3762—2020 目 次 前 言 I 1 范围 2 2 规范性引用文件 2 3 术语定义及缩略语 2 3.1 术语定义 2 3.2 缩略语 3 4 总体要求 3 4.1 参考架构 3 4.2 功能要求 3 4.3 性能要求 4 5 技术要求 4 5.1 管理能力要去 4 5.2 核心能力要求 4 5.3 运维能力要求 5 5.4 并行化及兼容能力要求 5 5.5 性能要求 5 6 测试方法 5 6.1 管理能力测试方法 5 6.1.1 数据源支持 5 6.1.2 用户权限管理 6 6.1.3 数据及模型输出 6 6.1.4 数据及模型管理 7 6.1.5 结果通知 7 6.2 核心能力测试方法 8 6.2.1 数据预处理算法 8 6.2.2 统计分析 8 6.2.3 支持基本的机器学习算法 9 6.2.4 深度学习算法 9 6.2.5 自定义算法 9 6.2.6 特征工程算法 10 6.2.7 可视化建模 10 6.2.8 可视化模型调优 11 6.2.9 评估 11 6.2.10 算法结果可视化 11 I YD/T 3762—2020 6.2.11 建模案例 12 6.2.12 算法详细信息 12 6.2.13 执行日志 12 6.2.14 二次开发语言兼容性 13 6.2.15 可视化算子编排调度 13 6.2.16 调度流程编排 13 6.3 运维能力测试方法 14 6.3.1 故障告警 14 6.3.2 备份恢复能力 14 6.3.3 平台操作日志记录 15 6.3.4 训练过程的高可用性 15 6.4 并行化及兼容能力测试方法 15 6.4.1 支持并行化算法 15 6.4.2 支持并行化任务 16 6.4.3 GPU 加速能力 16 6.4.4 异构计算资源兼容 17 6.5 性能测试方法 17 6.5.1 算法执行速率 17 6.5.2 算法准确率 17 6.5.3 算法鲁棒性 18 II YD/T 3762—2020 前 言 本标准是大数据系列标准之一，该系列标准名称和结构如下：