YDT 3773-2020大数据 分布式批处理平台技术要求与测试方法.pdf

ICS 35.020 L70 YD 中 华 人 民 共 和 国 通 信 行 业 标 准 大数据 分布式批处理平台技术要求与 测试方法 Big data - technical specification and test methods on distributed batch processing platform 中华人民共和国工业和信息化部 发 布 6.3.1 身份认证 11 6.3.2 权限管理 11 6.3.3 存储加解密 12 6.3.4 审计 12 6.4 兼容性能力测试方法 13 6.4.1 ODBC 接口兼容性 13 6.4.2 JDBC 接口兼容性 13 6.4.3 SQL 支持度 13 6.4.4 跨数据库关联操作 14 6.5 扩展性能力测试方法 14 6.5.1 在线水平扩展能力 14 6.5.2 在线水平收缩能力 15 6.6 多租户支持能力测试方法 15 6.6.1 多租户管理与资源分配 15 6.6.2 多租户资源管理 16 6.6.3 多租户资源隔离 16 6.6.4 多租户资源使用情况监控 16 6.7 运维管理能力测试方法 17 6.7.1 自动化部署 17 6.7.2 资源监控 17 6.7.3 作业监控 18 6.7.4 集群操作 18 6.7.5 故障管理 19 6.7.6 日志管理 19 6.7.7 配置管理 20 6.7.8 用户管理 20 6.7.9 集群无宕机升级 21 6.8 易用性能力测试方法 21 6.8.1 工作流创建 21 6.8.2 工作流管理 22 6.8.3 工作流监控 22 6.9 性能测试方法 22 6.9.1 概述 22 6.9.2 测试前审核 23 6.9.3 测试执行中 23 6.9.4 测试后 23 6.9.5 SQL 查询性能测试 23 6.9.6 NoSQL 数据库写操作性能测试 24 6.9.7 NoSQL 数据库读操作性能测试 24 6.9.8 NoSQL 数据库读写混合操作性能测试 24 6.9.9 Kmeans 算法执行性能测试 25 6.9.10 SVM 算法执行性能测试 25 II YD/T 1212—2016 大数据 分布式批处理平台技术要求与测试方法 1 范围 本标准规定了用于对大数据进行分布式批处理的软件平台或服务应具有的技术要求及相关的测试 方法。 本标准适用于大数据分布式批处理平台产品的设计、研发、测试、评估和验收等。 2 规范性引用文件 下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文 件。凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T 5271.18-2008 信息技术 词汇 第18部分：分布式数据处理 GB/T 32400-2015 信息技术 云计算 概览与词汇 GB/T 35295-2017 信息技术 大数据 术语 3 术语定义及缩略语 3.1 术语定义 下列术语和定义适用于本文件 3.1.1 分布式系统 distributed system 网络联通的多台计算机组成，不同计算机之间通过网络通信传递信息进行计算任务相关的交流与 协同。 3.1.2 节点 node 连接至网络中的一个连接点，具体的定义根据所应用的网络和协议各有不同。在分布式系统中， 一个节点指代系统中一台连接至网络的计