基于元数据管理列表类型数据的技术框架.pdfVIP

基于元数据管理列表类型数据的技术框架 郭明航李够霞从怀军 (中国科学院、水利部水土保持研究所。杨凌712100) 摘要列表类型数据是科学数据最为常见的数据形式。本文从分析列表类型数据 的特征入手，认为数据集的元数据不仅是对数据集实体的说明，而且一定程度上还 决定着数据集实体的内容和数量，以及数据集实体之间的内在联系，这种联系正是 列表类型数据管理依据所在。在本数据库系统的设计中，采用了Oracle关系数据库 技术和C—W-D三层构架的Web数据库体系结构。同时，强调了数据安全管理和数 据共享的关系及实现方法：采用数据集的元数据和数据集实体逻辑上关联，物理存 储上分离；用户管理设置不同的权限，这种权限从数据库、数据表、属性字段3个 层面上实现。这种数据安全和共享策略，可为数据库建设和使用提供更为灵活的方 式。 关键词元数据列表数据数据库 科学数据作为现代科学可持续发展的重要资源以及科学数据与知识创新的密切关系在科 学界已经成为共识。从20世纪开始的百余年来，随着科学研究的发展，科学数据的地位、作 用以及管理方式也处在不断的变化之中，这种变化体现在：科学研究对数据时空广度的依赖 性更强，科研过程中数据的使用密度更大。科学数据亦成为引领科技发展方向的重要依据， 在地球系统科学领域，综合性科学研究计划都是基于长期观测系统的科学数据的基础上开展 方面，数据库技术、数据处理技术、数据应用和共享的法律政策问题等也在迅速发展和越来 越得到业内人士的关注。适应这种变化的重要标志诸如世界数据中心的组建、国际科学数据 委员会的成立、数据科学作为-I-J独立学科的诞生【l】等。毋庸置疑，数据作为信息时代、知 识经济时代最活跃的因素，正在剧烈的影响着当今世界的每个角落。 水土保持学同属地学和生物学的研究范畴，其研究对象涉及地球系统各圈层的方方面面， 研究过程的表述乃至结果的呈现形式纷繁多样，其中数据表类型的数据应该说是最普遍的， 而且是主要的，科研工作中对该类数据的引用也是最常见的。基于上述，本文将以黄土高原 水土保持数据库的建库实践为基础，着重讨论二维关系数据表和多维嵌套关系数据表中不适 合建立关系数据库的数据表，并且数据表对象作为一个整体实施各种操作的数据库管理方法， 试图从数据的管理和使用两个方面给出一个实用的技术框架，为同类数据库的建设提供参考。 1．相关概念在本文中含义的界定 1．1元数据 对元数据的定义和使用在不同行业存在一定的差异，但一般都认可元数据是“关于数据 的数据”，亦即，元数据足用于描述数据的内容、质量、产生过程和方法、管理和使用说明的 353 数据。元数据的特点和作用在不同的行业和时期在不断的发展和完善。对于面向列表类型数 据的元数据可归结为以下几个方面： · 元数据描述的基本单位是数据集，根据数据集的复杂程度可扩展数据集中所包含的 数据集实体以及数据集实体的属性。 · 元数据的每一个元素是具有特定语义规则的结构化文本，为了提高元数据标准的适 用性、数据的安全性，对每一个元数据元素可进行可选性、重复性和可访问性3个 属性的设置。 · 元数据的使用通过建立Web数据库实现对数据集及其数据集实体的客户端访问。 · 元数据对数据的涵义、产生方法、使用方法等要进行完整准确的表述，避免数据引 用过程中对数据理解的二义性。 · 提供适当的数据管理元素，帮助数据的交换和传输，促进数据共享。 1．2元数据库 将结构化的元数据文本以关系数据表的形式存储在关系数据库中，应用关系数据库技术 对其实施特定的操作。 1．3数据集实体 数据集实体就是常说的数据表格，是指一系列拥有共同主题以及方法等特征的数据系列 的集合，其数据的组织遵守具有相同属性的数据位于相同的列(行)，相异的属性位于不同的 列(行)的排列规则。 1．4数据集 数据集可从狭义和广义两个方面解释，狭义的的数据集就是数据集实体；广义的数据集 是多个数据集实体及其元数据的集合。本文所使用的是广义数据集的概念。考虑到数据集和 数据集实体二者在管理、使用上的不同，所以数据集中的元数据是完全开放