机车车辆计量数据管理规范.docxVIP

1

机车车辆计量数据管理规范

1范围

本文件规定了机车车辆计量数据的数据结构、数据处理与传输、数据储存、数据共享和数据安全。本文件适用于机车车辆计量数据管理。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。

GB/T5271.17信息技术词汇第17部分：数据库

GB/T39477信息安全技术政务信息共享数据安全技术要求GB/T35295信息技术大数据术语

GB/T22239信息安全技术网络安全等级保护基本要求

GB/T18391.1信息技术数据元的规范与标准化第1部分：数据元的规范与标准化框架DA/T82基于文档型非关系型数据库的档案数据存储规范

JJF1001通用计量术语及定义

DB43/TXXXX机车车辆计量结果数字化处理规范

3术语和定义

GB/T5271.17、GB/T35295、GB/T18391.1、DA/T82界定的以及下列术语和定义适用于本文件。3.1

结构化数据structureddata

一种数据表示形式，按此种形式，由数据元素汇集而成的每个记录的结构都是一致的并且可以使用关系模型予以有效描述。

[来源：GB/T35295-2017，2.2.13]

3.2

半结构化数据semi-structureddata

具有结构性，但结构变化大，且难以用结构化数据的处理方法将其放进二维表的数据。

示例：XML文档内容，每项都被一对标记封起来，如title/title，表面上看是结构化数据，但title/title之间的数据却是千变万化，这是典型的半结构化数据。

[来源：DA/T82-2019，2.8]3.3

非结构化数据unstructureddata

不具有预定义模型或未以预定义方式组织的数据。[来源：GB/T35295-2017，2.1.25]

3.4

2

数据库database

支持一个或多个应用领域,按概念结构组织的数据集合,其概念结构描述这些数据的特征及其对应实体间的联系。

[来源：GB/T5271.17-2010，17.01.01]

4数据结构

4.1数据类型

包括结构化数据、半结构化数据和非结构化数据。

4.2结构化数据

基础数据模型应涵盖测量传感器名称、型号、编号、计量数据信息及其所依存的车辆型号、制造商、生产日期及部件等核心属性。

4.3半结构化数据

基础数据模型应涵盖计量设备的日志文件、测试数据的可扩展标记语言（XML）文档或JavaScript对象表示法（JSON）文档等。

4.4非结构化数据

基础数据模型应涵盖计量机车车辆描述性信息，包括音频、视频、图片和技术文件等。

5数据处理与传输

5.1数据应符合DB43/TXXXX（机车车辆计量结果数字化处理规范），数据处理的过程中应保证数据真实有效。

5.2数据传输处理过程中，应保证全过程的连续性、稳定性和完整性；若数据传输处理过程中发生数据缺失等异常情况，应重新进行数据的采集、处理。

6数据存储

6.1基本要求

6.1.1数据应储存在数据库中，支持多种数据结构的储存方式。

6.1.2储存介质应稳定可靠，能灵活转移。

6.1.3数据库应符合下列要求：

a)具有横向扩展功能，能支持大规模数据处理和高并发访问需求；

b)具有分片和集群功能；

c)支持索引优化与缓存机制；

d)支持数据备份和恢复功能；

e)支持数据加密、访问限制和用户权限管理；

f)具备审计日志功能；

3

g)具备良好的兼容性；

h)提供友好的管理界面与命令执行工具。

6.2存储方式

6.2.1结构化数据应采用关系型数据库进行储存，关系型数据库宜采用通用数据库。

6.2.2半结构化数据可单独存储在文档型数据库中，也可转换成结构化数据存入相应的数据库中，文档型数据库宜采用XML或JSON等。

6.2.3非结构化数据应采用文件形式存储至对象存储服务中，并将文件基本属性、存储路径等描述信息以结构化数据存入数据库中，系统上位机部分则采用数据库管理的方式对文件进行管理。

6.2.4数据管理应包括建立数据文件、对原始数据的存储、修改和查找等。

6.3数据库管理

6.3.1应包括数据库结构的优化、重组、重构、数据库的安全管控、报错纠错问题以及处理分析过程、数据库数据的日常备份。

6.3.2应创建不同类型的字段，根据用途和需求变化对字段进行增加、删除和修改操作，并提供数据导入/导出和数据迁移功