CN107066483-CN201611212819-一种交通行业指标数据编码及存储方法.pdfVIP

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 107066483 A (43)申请公布日 2017.08.18 (21)申请号 201611212819.X (22)申请日 2016.12.25 (71)申请人 北京通途永久科技有限公司 地址 100085 北京市海淀区上地十街1号院 3号楼11层1122 (72)发明人 程磊　翁剑成　张航　 (74)专利代理机构 北京思海天达知识产权代理 有限公司 11203 代理人 沈波 (51)Int.Cl. G06F 17/30(2006.01) 权利要求书1页 说明书3页 附图2页 (54)发明名称 一种交通行业指标数据编码及存储方法 (57)摘要 一种交通行业指标数据编码及存储的方法， 该方法由监测指标配置服务、监测指标数据生成 服务组成。监测指标配置服务定义了指标数据的 各属性及编码；监测指标数据生成服务根据监测 指标配置服务定义的指标数据的属性及编码进 而生成指标值，进而保存到分布式数据库中。监 测指标管理清晰、易维护。hbase相对于关系数据 库，通过时间戳很容易实现指标数据的多版本存 储、追溯。数据以文件系统方式保存在各数据节 点上，自动切分数据，使得数据存储自动具有水 平扩展；通过不断增加廉价的机器，来增加计算 和存储能力；满足指标数据持续增长要求。5000W A 条数据使用hbase导入30分钟以可以内完成，查 3 询同一个指标所有数据2秒可以完成。 8 4 6 6 0 7 0 1 N C CN 107066483 A 权　利　要　求　书 1/1页 1.一种交通行业指标数据编码及存储的方法，其特征在于：该方法由监测指标配置服 务、监测指标数据生成服务组成；监测指标配置服务定义了指标数据的各属性及编码；监测 指标数据生成服务根据监测指标配置服务定义的指标数据的属性及编码进而生成指标值， 进而保存到分布式数据库中；具体实施的流程包括以下步骤： 步骤1：监测指标配置服务； 监测指标配置服务包括指标数据的空间维度维护、监测指标维护；指标数据的空间维 度为树形结构，共8级，每一级占4位，为16进制数字，共32位，监测指标编码编码由服务后台 根据规则自动生成；监测指标编码由空间维度编码+时间范围+日期特征+时间特征+指标+ 单位+来源组成； 步骤2：监测指标数据生成服务； 监测指标数据生成服务根据步骤1：监测指标配置服务中的监测指标编码生成指标值 并存储； 接收主题库消息，根据配置生成指标值，获取和主题相关的指标集合；遍历指标并根据 配置生成指标；其他依赖该指标的指标，通过调度生成；指标值存储在分布式数据库hbase 中，使用“监测指标编码+时间”作为RowKey。 2.根据权利要求1所述的一种交通行业指标数据编码及存储的方法，其特征在于：监测 指标配置，包括以下步骤： 步骤1.1整理原始数据，如：刷卡数据、流量数据等，找出数据与检测指标的关系； 步骤1.2整理空间维度数据，建立树形：线路、站点、检查站、检测器；将空间维度数据进 行导入； 步骤1.3选择空间维度、指标、单位、时间范围、时间特征、来源、计算公式，创建监测指 标。 3.根据权利要求1所述的一种交通行业指标数据编码及存储的方法，其特征在于：监测 指标数据生成服务，包括以下步骤： 步骤2.1监听消息队列，找到关联的指标，生成指标数据； 步骤2.2如果生成成功，查询依赖该指标的其他指标，检查是否到生成时间，如果到了， 发送生成指标消息；没有的话，放