基于曙光3000计算环境的寒旱区资源环境数据平台建设.pdfVIP

笔 2G卷 第 2期 冰 川 冻 土 Vol|26 No．2 2 0 0 4年4月 JOURNAI OF GI ACIOLOGY AND GEOCRYOI OGY Apr．2 0 0 4 文章编号：1000—0240(2004)02—0224 06 基于曙光3000计算环境的寒旱区 资源环境数据平台建设 张耀南， 程国栋， 韦五周， 谭振华 (中国科学院 寒区旱区环境与In研究所冻土工程国家重点实验室，甘肃 兰州 730000) 摘 要：通过对寒区旱区资源环境研究中已积累的大量特色数据、应用模式和程序的分析，对分布式 网络环境中的数据采集与管理、应用模式和程序的移植集成、应用程序与数据的交互访问等技术进行 了讨论，提出建立由数据中心、中间件服务、应用服务、一站式管理组成的数据平台是提高数据利用效 率，方便实现数据与应用集成，提高科研效率的一种有效途径之一．对数据平台建设的主要思路及实 现技术进行了详细讨论，并在实验基础上，初步建立了基于曙光3000高性能计算环境的寒区早区资源 环境数据平台，为以后的数据网格建设做了一定的技术准备． 关键词：数据平台；数据中心；高性能计算；寒区旱区资源环境；数据网格 中图分类号：TP3¨．13 文献标识码：A 1 引言 台的主要思路及技术进行了论述 2 数据平台的总体结构与功能 在对高寒、干旱半干旱地区冰川冻土、高原大 气、沙漠生态、水土资源等资源环境的4O多年研究 2．1 总体结构 中，通过野外实验观测、科学考察、卫星遥感、实 在高性能计算、海量存储及网络环境下，建立 验室测试分析以及对外合作交流等数据获取途径， 数据采集与管理，数据加工与应用，一站式管理与 积累了具有寒区旱区鲜明特色的大量原始数据，同 服务的寒区旱区资源环境数据平台的主要目是：以 时积累了一批有效的研究模型、模式和应用程序． 数据中心为基础，实现各种数据资源的采集分类与 将这些数据与模型模式的有机集成会有助于寒区旱 管理；移植集成数据加工应用程序，完成数据预处 区资源环境基础和应用研究效率的提高和数据资源 理(如：数据校验、质量控制、格式转换等)；集成数 的高效利用．可为古气候反演、沙尘暴的时空分 据访问中间件，实现应用对数据的便利访问；集成 布、大气雷电模拟、水资源分布以及青藏铁路仿真 简单友好的人机界面实现数据输入、计算、结果回 与信息系统建设_】 ]、西部行动计划和“973”计划 传及其他应用请求的操作管理． 等重大项目的研究提供一个便利的平台． 由于大量数据分散在分布式异构存储环境中， 本文从提高数据应用和研究效率出发，采用数 数据格式多样，来源各异，要充分利用这些数据资 据网格的概念 ]，以曙光3000高性能计算机为计 源，就必须建立一个集关系型数据、空间数据、二 算与管理核心，以Oracle[4 作为关系型数据、空间 进制数据、文本数据等为一体的，具有从其所管理 数据、二进制数据、文本数据的管理平台，从结构、 的数据库中采集数据的能力的综合性数据管理中 功能和软硬件环境方面，对建立集数据中心、应用 心．为便于应用与数据的集成，需通过数据提取转 集成、中间件和一站式服务与管理于一体的数据平 换的中间处理层来完成应用模式程序对数据中心数 收稿日期：2003—06—09；修订日期：2003—12—08 基金项目：中国科学院寒区旱区环境与工程研究所知识创新工程项目((ACX210050)；中国科学院知识创新工程重