航遥应用案例.docVIP

基于STORNEXT软件构建SAN存储局域网环境下并行共享文件系统及 数据迁移归档系统应用案例 中国国土资源航空物探遥感中心对地观测实验室 黄炜 周伟 张渊 国内当前大规模使用StorNext异构文件共享及自动数据归档系统的航遥中心数据存储及处理系统，目前在中国国土资源航空物探遥感中心所投入使用，应用系统包括：遥感影像数据库、全国矿产资源开发多目标遥感调查和监测信息系统、全国省级国土资源遥感综合调查信息系统、青藏高原地质信息系统、航遥中心资料服务系统等。航遥中心数据存储及处理系统采用昆腾公司的StorNext并行共享文件系统及数据归档系统3.1版本（200个计算节点许可、4个IO节点许可、500TB迁移归档许可）作为SAN储存的数据并行计算存储管理架构，集成了60TB 惠普XP24000 SAN储存系统，昆腾i2K高性能磁带库（2台磁带库，单台实际配置：256TB，配备6台高速LTO-4机密磁带驱动器，300磁带槽位），是国内处理效率最高、系统配置最优、技术先进、文件共享性能卓越的航空遥感资料处理系统。该处理系统满足航遥中心了遥感数据存储、管理、分发等的应用要求。随着该处理系统的投产，其所具备的“自动化数据存储管理”﹑“大容量数据的存储和共享”﹑“自动的数据异地容灾技术”等功能，必将满足对数据的长期稳定、安全、统一存储管理和维护航遥中心核心数据的最迫切的需求。 面临的严峻挑战 中国国土资源航空物探遥感中心是中国地质调查局直属的事业单位，主要职责和任务是承担国土资源航空物探、遥感调查和相关技术研究、应用与推广工作，承担着我国大陆和海域的航空物探、卫星遥感以及大部分国土的航空遥感重任，是国家甲级测绘单位，全国地质勘查功勋单位，为我国许多大中型固体矿产和主要油田的发现做出了重要贡献。进入“十一五”，航遥中心的遥感探测任务面临着严峻的挑战，探测的对象越来越复杂，遥感采集的数据量成倍增长；如何提高数据的共享效果，加快数据的处理流程，组建初步的数据容灾技术，成为航遥在组建信息系统时的迫切技术需求；而航遥中心在建和完成的遥感数据库和专业应用系统处于分散存储的状态，不利于数据的整合和共享，无法满足新环境下对数据处理的要求，需要一个集中的基于数据库管理系统的存储解决方案。 经过充分的技术调研和方案论证，决定采用基于IA架构的高性能服务器集群系统。刀片服务器群是随着CPU、网络、系统集成技术和Linux的发展而出现的新的高性能计算平台。由于价格和性能等因素使刀片服务器集群被越来越多的用户所采用。而这些高性能刀片服务器集群则是透过使用StorNext并行共享文件系统及数据归档系统来充分使用并共享惠普 XP24000 SAN储存系统，使得服务器集群有效而经济地进行文件分享及数据归档，大大降低了储存成本和促进了工作程序的快捷。在航空摄影数据暂存和在线应用、历史资料的集中存储管理，尤其在遥感数据库和专业应用系统得到了很好的应用，提高了航遥中心遥感数据存储、管理、分发的效率。 优选的系统配置方案 本着“系统配套、结构合理、技术先进、性能高效”的原则，根据航遥数据处理的实际需求以及数字摄影测量系统软件对硬件运行环境的技术要求，最终选用了利用最新的CPU技术、网络技术、光纤技术、StorNext并行共享文件系统及数据迁移归档系统和开放的工业标准而提出的高性能计算解决方案和基于物理磁带库的建设方案。该方案由作业系统服务器、全线速千兆（万兆）以太网络、SAN存储磁盘阵列、StorNext并行共享文件系统、数据迁移归档系统和高容量物理磁带库组成,它的实施使的航遥中心在遥感资料处理和共享及数据自动保护上达到国内先进水平。 StorNext文件共享及数据归档系统解决方案具有下列优良特性: 可用性好-遵循先进的工业标准设计理念，广泛支援目前市场上所有流行的操作系统系统平台，包括了航遥数据所目前运行的主流的Windows/Linux/HP-UX等操作系统版本； 性能价格比高-透过2台StorNext MDC服务器及3台StorNext SAN 客户端作为I/O节点，使的作业用服务器集群的计算节点有效地以WINDWOS上CIFS服务使用并共享StorNext文件系统，按照所制定的500TB数据迁移归档策略来有效节约SAN储存空间，及对资料作自动的归档备份，增进资料的保护和安全； 良好的可管理性-透过网页图形介面，显示StorNext文件共享系统和数据迁移归档的管理选项，及系统使用状况一目了然，使日常StorNext系统管理更容易； 自动的数据容灾-通过配置2台Scalar i2000物理磁带库，磁带库在本地通过光纤线缆连接到核心的SAN交换进，在Stornext SNMS的集中管理和统一策略调度下，被迁移的数据会自动被存储到2台物理磁带库的不同磁带中，实