DATAGRID允许地理上分布的团体对PetabytesTerabytes的科学.PPT

第五章 网格数据管理技术  内容 数据网格技术概述 Globus 的数据管理 OGSA－DAI 第一节数据网格技术概述 什么是数据网格? 从科学研究的角度看：允许地理上分布的团体对Petabytes（Terabytes）的科学数据进行复杂、计算密集型的分析、处理 多个数据提供者 跨网络的最优数据移动 无缝的安全的数据访问 良好的访问控制机制和复杂的使用方式 数据访问的保证 类似电力网格 Multiple power generators Complex transmission networks with switching Simple Usage Interface – plug and play Guaranteed Supply - Meeting of demands Complex cost function 从 1993 到2004 巨大的数据量: Petabytes For an increasing number of communities, gating step is not collection but analysis 无处不在的因特网:100+ million hosts Collaboration resource sharing the norm 超高速的网络: 10+ Gb/s Global optical networks 巨大的计算能力: 100+ Top/s Moore’s law gives us all supercomputers 结果:全球知识社区的出现 围绕共同的目标组织的一支队伍 社区: “Virtual organizations” 各种成员和能力 异构是一种力量而不是弱点 地理上和行政管理区域的分布 没有一个点和机构具有所有的能力和资源 适应如此环境是系统的功能 调整成员、分配职责和资源 全球知识社区的出现 全球知识社区的出现常常是由数据驱动: 例如 Astronomy 数据的集成是一个基本的挑战 为什么我们需要数据网格? 数据是分布的 远程进行计算 分布计算 大规模的数据移动 跨域的数据共享 大规模的数据存储 多个数据集合的访问 动态、分布的社区信息资源的共享 建立、协商、管理和多组织的联邦的发展 协同、管理、提供、工作流的监控和所需资源 数据网格需求 –1 无缝的访问 规模可扩 in Size Number 可保证的质量传递 Fault tolerance, load sharing，Consistency Maintenance 处理异构和多样性 Platforms systems, vendors, types of storage, types of services, types of processes users 可控制的数据移动 Demand-driven Data placement Caching, archiving, version and locks Third-party data movement Parallel data transfer 数据网格需求 –2 数据结构和表示 DGMS必须支持访问所有在数据结构和表示中定义的数据类型 Numeric data at highest of precision Text data in any format, structure, language, and coding system Multimedia data in any standard or user defined binary format 数据网格需求 –3 支持自动的认证 Multiple Authentication Realms – single sign-on Uniform user name space 授权 – 访问控制 Seamless One-stop authorization Roles Tickets – inheritance longevity Possible: data owner can grant 、revoke access、permission ，and delegate authority Flexible ：combinations of restrictions and the level of granularity level Effective: grant and revoke all types of privileges dynamically Easily ：provide facilities or tools to owners 数据网格需求 –4 虚拟数据组织 Data Location Independence，Uniform