第六章网络GIS数据存储课件.ppt

第六章 网络GIS数据存储 网络GIS数据存储 6.1 数据存储概述 6.2 网络存储分类 6.3 网络存储模式 6.4 网络GIS数据存储实例 6.1 数据存储概述 数据存储技术须解决的问题： 速度 纠错与恢复 备份 安全 费用与成本 在线、近线、离线存储 6.1 数据存储概述 一、数据存储技术的发展与分类 1.存储技术的发展趋势 磁存储技术 软磁盘、硬磁盘 光存储技术 光存储技术就是用CD、DVD等光盘来读写数据的技术。 光存储技术在记录密度、容量、数据传输率、寻址时间等关键技术上将有巨大的发展潜力。 6.1 数据存储概述 一、数据存储技术的发展与分类 1.存储技术的发展趋势 可生存存储系统 将一个文件分成多个数据段，分别存储到各个服务节点上，当用户需要访问时，必须要访问各个存储服务器，当一个服务节点被攻破时，并不能泄漏任何完整的文件信息，保证了在存储服务器被攻破后，仍然能够保护数据的保密性。 6.1 数据存储概述 一、数据存储技术的发展与分类 1.存储技术的发展趋势 基于MEMS的存储器 6.1 数据存储概述 一、数据存储技术的发展与分类 2.存储技术的分类 按连接方式分 直接连接存储、附网存储、存储区域网 按存储系统联机方式分 在线存储、近线存储、离线存储 按接口协议标准 SCSI、光纤连接、3GIO、InfiniBand 6.1 数据存储概述 二、磁盘阵列技术 1.RAID技术 6.1 数据存储概述 二、磁盘阵列技术 1.RAID技术 RAID（磁盘阵列：Redundant Array of Inexpensive Disk，简称RAID技术)。 它是1988年由美国加州大学Berkeley分校的David Patterson教授等人提出来的磁盘冗余技术。从那时起，磁盘阵列技术发展得很快，并逐步走向成熟。 RAID 的优点是： （1）传输速率高。 （2）容错功能。 （3）RAID比起传统的大容量磁盘驱动器来，在同样的容量下，价格要低很多。 6.1 数据存储概述 RAID 0 (0级磁盘阵列) RAID 0又称数据分块，即把数据分布在多个盘上，没有容错措施。其容量和数据传输率是单机容量的N倍，N为构成磁盘阵列的磁盘机的总数，I/O传输速率高，但平均无故障时间MTTF(Mean Time To Failure)只有单台磁盘机的N分之一，因此零级磁盘阵列的可靠性最差。 6.1 数据存储概述 RAID l (1级磁盘阵列) RAID l又称镜像(Mirror)盘，采用镜像容错来提高可靠性。即每一个工作盘都有一个镜像盘，每次写数据时必须同时写入镜像盘，读数据时只从工作盘读出。一旦工作盘发生故障立即转入镜像盘，从镜像盘中读出数据，然后由系统再恢复工作盘正确数据。因此这种方式的数据可以重构，但工作盘和镜像盘必须保持一一对应关系。这种磁盘阵列可靠性很高，但其有效容量减小到总容量一半以下。因此RAID l 常用于对出错率要求极严的应用场合，如财政、金融等领域。 6.1 数据存储概述 RAID 2 (2级磁盘阵列) RAID 2又称位交叉，采用汉明码作盘错检验，无需在每个扇区之后进行CRC(Cyclic Redundancy Check)检验。汉明码是一种(n，k)线性分组码，n为码字的长度，k为数据的位数，r为用于检验的位数。因此按位交叉存取最有利于作汉明码检验。这种盘适于大数据的读写。但冗余信息开销还是太大，阻止了这类盘的广泛应用。 6.1 数据存储概述 RAID 3 (3级磁盘阵列) RAID 3为单盘容错并行传输阵列盘。它的特点是将检验盘减小为一个（RAID 2校验盘为多个，RAID l 检验盘为1比1），数据以位或字节的方式存于各盘。它的优点是整个阵列的带宽可以充分利用，传输时间减小；其缺点是每次读写要牵动整个组，每次只能完成一次I/O。 6.1 数据存储概述 RAID 4 (4级磁盘阵列) RAID 4是一种可独立地对组内各盘进行读写的阵列。其校验盘也只有一个。RAID 4和RAID 3的区别是：RAID 3是按位或按字节交叉存取，而RAID4是按块(扇区)存取，可以单独地对某个盘进行操作。不像RAID 3那样，每一次小I/O操作也要涉及全组，RAID4只需涉及组中两台磁盘机（一台数据盘，一台检验盘）即可，从而提高了小量数据的I/O速率。 6.1 数据存储概述 RAID 5 (5级磁盘阵列) RAID5是一种旋转奇偶校验