大数据背景下空间数据挖掘研究.docVIP

大数据背景下空间数据挖掘研究 　　摘 要：空间信息的概念进入公众视野、成为研究人员的探讨议题后，部分专家便预测了空间数据挖掘的必然出现，由于大数据时代对于数据的特殊要求及属性定位，势必会带动一股对于数据整合手段的讨论热潮，而空间数据挖掘技术随之应运而生。文章主要讨论了空间大数据的价值以及如何发掘空间大数据两方面的问题。 　　关键词：大数据；空间数据；挖掘利用 　　中图分类号：TP311.13 文献标识码：A 文章编号：1674-7712 （2014） 24-0000-01 　　随各类型资料、信息的聚集量逐渐扩大，信息整合技术手段层出不穷，可以说，我们当下生活的环境已进入大数据时代。各类型事件、各类型组织、各类型研究议题均无法脱离大数据时代的长远影响。大数据时代已经开启便注定其今后的主导地位。而空间数据挖掘则是大数据时代的主要代表思想，从其概念看，空间数据挖掘指的是将存在于空间领域、表面看毫无规律、内在联系不明显的隐含数据信息运用相关特征及模型建立手段进行提炼的过程。 　　一、空间大数据的价值 　　（一）总体认知原貌。大数据的开发利用让人类可以从虚拟信息世界中观察到世界的全貌，在大数据产生以前，受空间数据采集、数据储存、运算处理等能力的限制，概率统计工作只能从采用随机抽样的方法，根据样本数据来推测全体数据。这就犹如盲人摸象，只是对局部数据有很深的了解，很难真正认识总体的规律和变化。但是在大数据时代，人们可以收集存储大量的数据，从而克服了抽样调查的局限性。人们可以从大数据中了解世界的原貌，进而寻找其中隐含的规律。比如对气象卫星传回的数据进行分析，从而准确进行天气预报。 　　（二）基础性资源。美国著名经济学家詹姆斯?麦肯锡认为数据也是一种基础性资源，甚至与物质资金、人力资源一样重要，它可以为世界经济创造巨大的价值。美国政府认为大数据是“未来的新石油”，关系到国家经济的未来。 　　二、大数据下的空间数据挖掘 　　（一）基本的大数据技术。基本的大数据技术有搜集、储存、处理、表达以及评估。（1）搜集技术。大数据的产生与发展离不开移动设备、RFID技术、传感技术、网络技术、电子商务、追踪系统等数据产品的发展。目前按照数据获取方式可将空间数据分为点方式、面方式以及移动方式三种获取方式。点方式获取就是通过GPS接受终端、全站仪等逐点搜集地表的空间坐标；面方式获取就是通过卫星遥感、航空遥感等大面积获取影像资料，并从中提取相关的几何特征；移动方式获取是将GPS、RS、GIS的技术手段植入对地观测系统中，从而获取、储存、分析空间数据；（2）储存技术。它是数据挖掘的基础，其价值就是为不断增加的大数据提供性能稳定可靠、扩展性强的储存管理方案。比如负载均衡、分布式数据储存等；（3）处理技术。其任务是完成数据→信息→知识→智慧的转变。比如地物叠加，空间数据的分析、挖掘、清理等，目标缓存以及影响分割等；（4）表达技术。顾名思义就是向用户清楚、有效的表达数据中包含的信息，以提供新视角寻找难以掌握的数据。比如数字中国、3D地图、数字模型、平面地图等；（5）评估技术。由于大数据的数据量庞大、测量密度高所以很容易出错，评估技术的作用就是尽量减少错误带来的风险。比如逻辑性评估方法、基于异常值或者核算的评估方法。 　　（二）发现空间知识。发现空间知识就是指通过一系列的空间数据挖掘方法从空间大数据中提取出未知的、有价值、可解规则的技术，它是一个由空间数据发展到空间信息，再由空间信息发展到空间知识的过程。空间数据发掘系统的作用在于将空间数据进行归纳整理，并升华成空间知识，再将这些新得到的知识与数据结合，做到对数据的处理、判断和决策。空间知识具有自学习性、自提升性、普遍性等特点，所以容易被人们认可和利用，是决策的重要依据。如果空间技术能够广泛应用于各行各业的话，那么人类的学习方式、工作方式、生活方式都会变得更加精细。从而有效提高资源利用率，减少资源浪费；促进人类生产力水平的发展。对于人类应对金融危机、能源危机、生态环境恶化等问题有巨大的帮助作用。 　　（三）萃取数据智能。所谓的数据智能就是对收集到的数据进行全面深入的分析，从中获得更为系统、更为全面、更为新颖的知识用来解决相关问题。是一种能够灵活、迅速、有效、正确、全面的理解问题和解决问题的能力。空间数据智能主要由透彻的感知能力、广泛的互动和智能化更加深入三大元素组成。三者协同合作，共同获取数量更多、内容更加全面的数据信息，通过互联网络实现这些数据的传递、分享。并利用与之相关的技术和方法深入分析数据、挖掘数据，形成一个层次结构。如果认为大数据的智能仅仅是将不同的数据挖掘技术简单的叠加到一起，那就大错特错。它是一个拥有合理的组织机构、优良的运行程序、强大的综合功能的面向某一个应用行业的系统智慧。一个行业的系