大数据在机场综合管理数据库建设中应用研究.docVIP

大数据在机场综合管理数据库建设中应用研究 　　摘 要： 把数据仓库、数据挖掘和可视化等大数据研究的关键技术应用到机场综合管理数据库建设中。利用数据仓库、数据挖掘和可视化等大数据研究的关键技术，实现机场在建设综合管理数据库过程中，各类型海量数据处理、数据仓库建设、数据的分析及价值发现。进而为机场建设综合管理数据库提供了设计方案。 　　关键词： 大数据; 机场; 数据仓库; 数据挖掘; 可视化 　　中图分类号：TP392 文献标志码：A 文章编号：1006-8228（2015）07-36-03 　　Research on the application of Big data in construction of airport management database 　　Song Hairui， Liao Bikai 　　（The Second Research Institute of CAAC， Chengdu， Sichuan 610041， China） 　　Abstract： Applying the key technology of Big data research， i.e. data warehouse， data mining and visualization， etc. in the construction of airport comprehensive management database， use these key technologies to realize the various types of massive data processing， data warehouse building， data analysis and value found. And then， provide the design scheme for the construction of airport comprehensive management database. 　　Key words： Big data; airport management; data warehouse; data mining; visualization 　　0 引言 　　目前，国内大部分机场已建设了各类业务信息系统，这些系统基本能满足机场运行和管理层面的业务需求。如何利用现有的手段和技术水平更好地整合利用这些系统运行多年产生的各类历史业务数据并发掘其潜在价值，进而为机场改进决策，提高服务质量，增加运营收益是大部分国内机场在建设机场综合管理数据库过程中面临的主要问题[1]。当前，大数据技术、数据仓库技术以及数据挖掘技术在很多领域的成熟应用为机场综合管理数据库建设提供了技术支撑和实现途径。 　　1 大数据综述 　　大数据是继云计算，物联网之后 IT产业又一次颠覆性的技术革命，对国家治理模式，企业决策，组织和业务流程，以及个人生活方式等都将产生巨大影响。大数据挖掘和应用可创造出超万亿美元的价值，是未来IT领域最大的市场机遇之一。 　　大数据不是一种新技术，也不是一种新产品，而是一种新现象和新思想，是近来研究的一个技术热点。大数据具有四个主要特点：数据种类繁多、数据体量巨大、价值密度低、处理速度快。因此传统的数据库时代的数据处理方式已经远远不能满足大数据时代的数据处理要求，这就需要用新的数据思维和技术来应对[2]。 　　大数据技术是一系列收集、存储、管理、处理、分析、共享和可视化技术的集合。适用于大数据的关键技术包括数据分布技术、任务分解技术、数据挖掘技术、数据仓库技术、可视化技术等。数据分布技术和任务分解技术是Hadoop的核心思想。数据挖掘技术是结合统计数据和机器学习，使用数据库管理技术从大型数据集中提取有用信息和知识的技术。数据挖掘的工具及方式包括回归、分类、关联分析、演化分析、聚类分析、序列模式等。大数据研究中典型的数据仓库技术包括Greenplum、Hive、Big Table的分布式数据库系统和HBase的非关系型数据库系统。可视化技术是通过创建图片、图表或动画等展示大数据分析的结果。典型的可视化技术包括标签云及Clustergram技术等。 　　2 机场运行面临的数据处理的挑战 　　随着互联网技术的不断发展，数据本身就是资产。云计算为数据资产提供了保管、访问的场所和渠道，但如何盘活数据资产，使其为企业决策乃至个人生活服务，是大数据的核心议题。目前，国内主要机场普遍采用以机场运行数据库为核心的建设模式，该模式以航班信息为主要信息源，以中间件平台为基础，实现信息集成系统、离港系统、航班显示系统、广播系统等生产系统的数据交互以及旅客服务类系统、机场及