基于数据仓库的广东省高速公路一张网过渡期通行数据及异常分析系统.docVIP

基于数据仓库星形模式的广东省高速公路一张网资金结算情况分析系统 马根峰 (广东联合电子服务股份有限公司 广州 510300) 摘要 星形模式是基于关系数据库的数据仓库中的一个著名概念，由于星形连接模式的设计思想能够满足人们从不同观察角度（维）分析数据的需求，所以在基于关系数据库的数据仓库的设计中广泛地使用了星形模式。本文主要介绍《广东省高速公路一张网资金结算情况分析系统》中的数据仓库技术。 关键词 数据仓库；星形模式；维度 1　数据仓库的特点 数据仓库技术是用以更好地支持企业或组织的决策分析处理的，面向主题的，集成的，不可更新的、随时间不断变化的数据集合。它通过将数据按照不同的综合程度（即粒度）来组织，以满足不同分析的需要。 本文主要介绍一下《广东省高速公路一张网资金结算情况分析系统》中如何使用数据仓库技术来实现“异常流水”与其修改量分析与“流水上传与拆分” 分析这两个主题。 2 星形模式 星形模式是基于关系数据库的数据仓库中的一个著名概念，由于星形连接模式的设计思想能够满足人们从不同观察角度（维）分析数据的需求，加上数据仓库通常用来回答综合性的问题，所以在基于关系数据库的数据仓库的设计中广泛地使用了星形模式，如电信运营商中普遍进行的话务总体分析。 3 系统中的数据仓库设计 3.1 广东联合电子结算中心操作型环境 DB2数据库服务器下的数据组织情况 在广东联合电子结算中心， “异常流水”、“流水拆分”、“流水上传”有关的关系模式 粤通卡精确拆分结果明细表 tb_cardaccuratesplitresult (流水号,工班, 出口路段…, 收入路段) 现金精确拆分结果明细表 tb_cashaccuratesplitresult (流水号,工班, 出口路段…, 收入路段) 流水非精确拆分记录表 tb_inaccuratesplitrecord (流水号,工班, 出口路段…, 收入路段) 拆分流水异常记录表 tb_outlistspliterrorgb(流水号,工班,出口路段, …, 错误类型代码) 拆分流水异常记录历史表 tb_outlistspliterrorgb_his(流水号,工班,出口路段, …, 错误类型代码) 流水异常记录表 tb_outlisterrorgb(流水号,工班,出口路段, …, 错误类型代码) 流水异常记录历史表 tb_outlisterrorgb_his(流水号,工班,出口路段, …, 错误类型代码) 出口流水表 tb_outlistgb (流水号,工班,出口路段, …, 上传时间) 3.2 系统的中数据仓库设计 考虑到篇幅，各步骤经过简化如下： 概念模型设计 逻辑模型设计 数据仓库生成 3.2.1概念模型设计中的界定系统边界 在广东电信公话中心，管理者最迫切进行的分析主要有： 各高速公路路段公司不同工班的流水上传、流水拆分。 分析各个高速公路路段公司上传的异常流水（包含异常及拆分异常）、及其修改的情况； 要进行以上的分析，所需数据应包括： 分析各个高速公路路段公司在一段周期内的流水上传、拆分、异常总量、异常修改情况。 分析各个高速公路路段公司上传的异常流水（包含异常及拆分异常）、及上传的异常的流水（包含异常及拆分异常）流水的修改情况； 各个高速公路路段公司及他们的软件开发商 广东省高速公路所有的路段信息； 3.2.2 逻辑模型设计 因为细节级数据太大，数据仓库又建立在本人的PC机MS SQL SERVER 服务器上，加之迫于分析任务提交时间的压力，故本数据仓库中不再涉及细节级数据表的设计、数据挖掘。 关系模式定义： ok_xiugai (LISTNO, UPLOADTIME, OUTROADNO, SQUADDATE, ERRCODE, ERRMSG…) no_xiugai (LISTNO, UPLOADTIME, OUTROADNO, SQUADDATE, ERRCODE, ERRMSG…) upload_split(路段编码, 路段名称, 工班, 上传流水数量, 拆分流水数量…) kaifa (roadno, kaifa_name) tb_road(areano,roadno,roadname,…) 3.2.3 数据仓库数据生成 数据仓库中数据的生成包括操作型环境数据的挖掘和数据仓库中数据的生成这两部分的内容。在这一步里所要做的工作是接口编程，以实现将操作型环境下的数据装载进入数据仓库环境。 4　数据仓库的数据导出与展现 4.1 万能数据库查询分析器 万能数据库查询分析器，中文版本《DB 查询分析器》、英文