关于云数据管理系统中查询技术研究.docVIP

PAGE PAGE 1 关于云数据管理系统中查询技术研究 　　摘要：云计算，就是指通过互联网利用可伸缩的一种虚拟化资源进行数据存取的计算模式。利用云计算可以实现终端之间数据的随意存取，为计算机硬件存储空间短缺这一问题带来了新的解决方案。云计算的强大运算功能背后是需要一个系统的云数据管理系统来支撑的。其数据查找技术，则是保证用户能够在庞大的云数据库中快速找到自己所需的数据的基础技术。与传统的计算机查找技术不同，云数据管理系统中的查询技术更加先进高端，技术性更强。该文中首先分析了云数据管理系统的基本框架和云数据查询查询处理的目标特性，继而详细介绍了目前常用的两种云数据管理系统查询技术：BigTable技术和Dynamo技术。 　　关键词：云计算；数据管理；查询技术；系统框架 　　中图分类号：TP311文献标识码：A文章编号：1009-3044（2013）12-2761-03 　　随着计算机信息技术的不断发展与应用，越来越多的互联网应用技术被研发应用，极大的改善了人们的生活观念与工作习惯，促进社会快速进入一种全新的信息化时代。云计算技术就是这样一种具有跨时代性质的新兴互联网应用技术，实现了高效海量、存取方便的数据云端管理，极大的提高了信息查询速度和数据存储能力，为互联网的进一步发展提供了更大的空间。 　　云计算是一种具有可扩展性、海量性、高可用性、种类多样性、按需服务性等诸多优点的高性价比的计算技术，可以实现异地备份，随时随地存取数据，因而节省了大量的存储设备投资，具有很大的经济性。但需要注意的是云计算是为了能够实现快速高效的为用户提供信息资源而服务的，因而其所需的云数据管理系统以及查询技术是与传统的计算机管理与查询技术有着很大区别的。云数据管理系统需要一个能够灵活运用数据模型来进行高效多样化管理的数据管理与查询技术，以实现按需索取、快速高效可靠的数据存取与查询服务。 　　1云数据管理系统的基本框架构成 　　为了能够更好的体现出云计算技术的优越性能，就需要对云数据管理系统的管理技术与查询技术进行全面优化升级，改进传统数据库中存在的诸多问题，使云数据管理系统的整体架构更加合理健全。在此，我们来简要概述云数据管理系统的基本框架构成主要包含哪些内容。一般认为，云数据管理系统的基本构架应当含有应用接口层、查询处理层、数据控制层以及数据存储层等四部分。具体分析如下所示： 　　1.1应用接口层 　　这个环节主要是为了接收用户上传的信息数据请求，并将这些信息数据转交给查询处理层进行一定处理，从而提供云数据管理中所需的查询语言接口、用户自定义接口、数据分析以及在线聚集等诸多应用，这样就可以使用户不但能够通过查询接口和用户自定义接口操作数据，也能够以可视化工具来对数据进行分析，或者在线聚集。 　　1.2查询处理层 　　这个环节主要是为了将应用接口层中所提交的用户数据信息做出解析处理和逻辑优化之后再将其转变为操作符树，以促使其生成MapReduce执行计划。但若应用接口在提交信息数据时是以用户自定义操作的模式来实现的，那么就可以无须处理直接生成MapReduce执行计划。除此之外，查询处理层还具有依照查询类型与数据的分布特点将信息数据做成查询计划并对计划作出逻辑性优化的重要任务。 　　1.3数据控制层 　　这个环节主要起到三个作用，即通过全局索引以及原数据信息将数据进行定位处理，备份数据以及数据迁移。并在在线聚集的环节中将数据信息做出统一采样收集，并对进程进行估计。由于数据层是至直接影响到查询执行与在线聚集的重要环节，因此做好数据控制层的管理技术改进是非常重要的。 　　1.4数据存储层 　　顾名思义，数据存储层就是对数据信息进行存储的主要环节，并负责将每个节点范围中的所有数据进行索引设计，对缓冲区及日志进行管理。其中存储层的节点是能够通过以多种形式组合形成的。但不管是利用哪种形式结构，其所含的数据都是要被分区到各个节点进行存储的，因此，保证数据分布的均匀合理，提高节点的数据存取效率是当前数据存储层发展中的重点问题。 　　2云数据查询处理技术的目标特点 　　目前，在云数据的管理系统中，若要促使云数据管理的服务更方便快捷，就需要不断提高其查询处理技术，在此，我们来详细分析云数据查询处理技术需要达到的目标特点，即可扩展性、可用性、异构环境的运行能力以及丰富灵活的用户接口、高效的数据存取性能。 　　2.1可扩展性 　　由于不同的云系统其所具有的云平台是有很大不同的，无论是从规模大小方面，还是服务应用方面都是有着一定的差异。一般小规模的个人或者私有云平台只具有十几个节点，而一些规模较大的公有的云平台则可以有几千个之多的节点。另外，由于云计算技术是一种以用户需求为依据来实现服务的技术，因此其必须要根据用户的需要来进行不同的云平台规模变换，这些都给云数据管