基于OLAP农村应急数据集成研究.docVIP

基于OLAP农村应急数据集成研究 　　［摘要］ 中国村镇应急服务的系统亟待建设。村镇应急数据来源广泛，种类繁多，资料格式没有归一化，很难在灾害发生时起到直接的决策支持的作用。因此需要将这些数据进行集成与分析，为决策者提供支持。本文研究了村镇应急服务中的信息来源和主题，并分析了OLAP在村镇应急服务中的决策支持作用，并以森林火灾应急服务系统为例加以阐述。基于数据源创建了多维数据集。而不同的主题需要构建不同的多维数据集，多维数据集来源于数据仓库中的数据。基于上述需求，以SQL Server 2005集成服务的API为基础，开发了ETL工具，可以完成基础的数据抽取、清洗及装载工作。 　　［关键词］ 村镇；数据集成；OLAP；应急 　　doi : 10 . 3969 / j . issn . 1673 - 0194 . 2011 . 23. 023 　　［中图分类号］TP392；D630 ［文献标识码］A ［文章编号］1673 - 0194（2011）23- 0047- 04 　　 　　０引言 　　中国是自然灾害多发国家，自然灾害一旦发生就可以导致社会经济系统失衡，社会财产产生损失，社会资源出现严重的供需不平衡［１］。当大型自然灾害发生时，就需要国家对灾区进行资源的调度与分配。本文以森林火灾应急服务系统为例，讨论村镇服务信息的ＯＬＡＰ和数据集成问题。 　　森林火灾应急服务数据的内容涉及森林火灾监测、火险预报、灾后评估等方面。同时，作为现代村镇应急公共服务系统的子系统，其需要将区域内的救灾物资、避难设施、道路通讯等数据一同集成至数据库，以供决策者直接查看，解决物资与粮食的资源调度问题。同时，数据库及数据仓库的构建对未来整个现代村镇应急公共服务框架中更深层次的数据挖掘、ＯＬＡＰ等服务，也起到重要的作用。 　　１应急数据分析 　　森林火灾应急服务系统，是指在火灾发生以后，或火灾预报发布以后，为相关部门开展对火灾发生地区的一系列应急救援活动提供所需了解和掌握的各种社会基本信息的一种数据库。这个系统是现代村镇应急公共服务系统的子系统，通过网络接口从火灾监测部门获取监测数据。监测部门发布警报或预报信息后，通过对数据库中信息的查询、对比、分析，向决策者提供数据［２］。 　　数据库内容主要包括： 　　（１）地图地理类。 　　（２）公共服务信息类。包括应急救援时使用的物资、人力资源、避难所等信息。 　　（３）灾害信息类。灾害相关数据表。 　　（４）公共设施类。战略要害部位、生命线工程、次生灾害源等。 　　（５）组织结构类。扑火组织登记表、扑火设备登记表、扑火设备使用情况表。 　　这些信息来源于不同部门如地震部门、林业部门、气象部门的专业数据库，或者政府、医院、学校等部门的资料，涉及部门多，涉及范围广，在数据的收集和整理的工作中，很多资料因为没有电子化，可能需要手工输入，这样就给数据库建设带来很大的难度。数据的来源可能是多种多样的，这与不同部门在历史过程中存储数据使用的介质有关。电子政务虽然在我国已经发展了一段时间，但各种纸质文档在历史资料中仍然占有很大的比重。数据不公开、不共享和数据属性不一致也是各个单位之间数据和资料流通中的存在问题。而同一单位中的不同部门也可能会使用不同的数据存储技术存储操作数据，可能存储在不同架构的数据库中。因此，在基础数据的提取、转换和加载过程中，需要按照一个统一的标准将多源异构数据整合到一个实时数据库中，再经过转换存储至数据仓库，为后续的ＯＬＡＰ分析及数据挖掘提供基础。 　　２森林火灾ＯＬＡＰ模型 　　ＯＬＡＰ（Ｏｎ－Ｌｉｎｅ Ａｎａｌｙｔｉｃａｌ Ｐｒｏｃｅｓｓｉｎｇ，联机分析处理），最早是由关系数据库之父Ｅ．Ｆ．Ｃｏｄｄ于１９３３年提出的。ＯＬＡＰ是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。ＯＬＡＰ的核心技术是概念：“维”。 　　“维”是人们观察客观世界的角度和立场，是一种高层次的类型划分。“维”一般包含着层次关系，这种层次关系有时会相当复杂。通过把一个实体的多项重要的属性定义为多个维（Dｉｍｅｎｓｉｏｎ），使用户能对不同“维”上的数据进行比较。因此ＯＬＡＰ也可以说是多维数据分析工具的集合。ＯＬＡＰ工具针对特定问题进行联机数据访问与分析。它通过多维的方式对数据进行分析、查询和报表。维是人们观察数据的特定角度。多维分析是指对以多维形式组织起来的数据采取切片（Ｓｌｉｃｅ）、切块（Ｄｉｃｅ）、钻取（Ｄｒｉｌｌ－ｄｏｗｎ和Ｒｏｌｌ－ｕｐ）、旋转（Ｐｉｖｏｔ）等各种分析动作，以求剖析数据，使用户能从多个角度、多侧面地观察数据库中的数据，从而深入理解包含在数据中的信息［３］。 　　根据数据组织方式的不同，目前常见的ＯＬＡＰ主要有基于多维数据库的ＭＯ