分布式文件系统在gs模式中的应用研究-application research of distributed file system in gs mode.docxVIP

独创性声明本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的 研究成果。据我所知，除了文中特别加以标注和致谢的地方外，论文中不包含其 他人已经发表或撰写过的研究成果，也不包含为获得成都理工大学或其他教 育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何 贡献均已在论文中作了明确的说明并表示谢意。学位论文作者签名：年月日学位论文版权使用授权书本学位论文作者完全了解成都理工大学 有关保留、使用学位论文的规定， 有权保留并向国家有关部门或机构送交论文的复印件和磁盘，允许论文被查阅和 借阅。本人授权 成都 理工大学可以将学位论文的全部或部分内容编入有关数 据库进行检索，可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。（保密的学位论文在解密后适用本授权书）学位论文作者签名： 学位论文作者导师签名：年月日第 1 章 引言1.1 课题来源国家发改委项目：基于遥感与导航定位技术的数字旅游服务系统（发改办高技[2009]214 号）。1.2 选题目的及意义随着科技的进步，人们在通过各种渠道获取大量空间信息数据的同时对空间 信息应用需求也日益增长，需要处理更大容量的空间数据，更快的数据传输速率 和更快的处理速度也是必须的。这些应用需求对空间数据的网络访问方式提出了 更高的要求，G/S 模式[1]就是为了解决这些应用需求而设计的新的架构。G/S 模 式即 Geo-Information Browser/ Distributed Spatial Information Servers（地学信息浏 览器/分布式空间数据服务器群），是一种结合 B/S 和 C/S 优势的基于互联网的分 布式空间信息服务模式，为解决大容量、高分辨率空间信息数据在网络上的传输 和访问提供了一个信息新的方案。基于 G/S 模式的空间信息网络访问服务体系结 构是一种全新的架构，空间数据存在网络节点的数据服务器中，数据和服务在服 务端的分布状况对用户是透明的。G/S 结构拥有 C/S 结构充分利用客户端资源、 高效处理客户端数据的优点，以及 B/S 结构客户端统一、网络访问方便的优点[1]。 G/S 模式为海量空间数据的存储和发布提供了一种新的解决方案。G/S 模式的 S 端为分布式服务器群，为 G 端的各种应用提后台服务支持。由 于 G 端主要为用户提供各种空间信息技术服务，所以 S 端分布式服务器群存储 了大量的空间数据。空间数据种类繁多，包括基础数据（遥感数据、导航卫星数 据、地形数据等数据），行业数据（测绘数据、地质数据、物探数据、生态数据、 旅游数据、交通数据、林业数据、农业数据等不同行业和专业的专题数据）。数 据容量差别巨大，如测绘部门的全国 1∶25 万地形数据库的数据量达 4.5GB，而 大量的 HGML、KML、GML、KMZ 数据都是 KB 级别的，这些种类繁多，格式 不兼容，容量大的数据要在 G 端正确并且快速的显示，很多问题必须由 S 端处 理，包括数据如何存储，如何编码，如何快速的上传给客户端，负载均衡，自适 应等。通过 Google 文件系统提供的经验，用分布式文件系统存储管理空间数据 比用数据库管理这些数据更为实用，即不用考虑数据库复杂的关系数据模型，也 不用考虑数据库的承载能力。随着网络存储技术的发展，现有的分布式文件系统与传统的文件系统以及早期的分布式文件系统有很大的不同，与其他技术发展的道路类似，需求决定了技术的发展方向，现有的分布式文件系统能提供很多服务，数据存储与访问只是最 简单的功能，很多分布式文件系统都具备高可用性、冗余存储、负载均衡、数据 容错、海量存储等功能，这些功能使得分布式文件系统应用广泛，发展潜力巨大。 在实际应用中，Google 公司的服务器就采用了分布式文件系统，现在流行的云 计算也有分布式文件系统参与，这些即验证了分布文件系统的实用性，也给予分 布式文件系统发展的动力。基于 G/S 模式的分布式文件系统的研究也是从需求出 发，目的是解决空间数据的存储与发布问题，在实际应用中非常有意义。1.3 国内外研究现状分布式文件系统是一个比较活跃的研究方向，现国内外很多大学及研究机构 还有公司等都已经或正着手开发自己的分布式文件系统以支持那些 I/O 密集型应 用，以此来发挥集群系统的优势。近年来，美国、澳大利亚、日本等多个国家的 大学已经研究出一些各具特色的分布式文件系统。一些计算机厂家也开发了自己 的分布式文件系统，这些系统一般为专用文件系统，多为运行在特定的 UNIX 操 作系统之上的工作站或并行计算机。而开源社区中也开发出了一批可运行于 Linux 操作系统之上的分布式文件系统，正是这些开源项目大大促进了分布式文 件系统的发展与应用。现有的各种分布式文件系统各具特色，各有各的优势，各