分区存储技术在地理国情普查数据库中的应用.pdfVIP

2017 年 5 月 地 理 空 间 信 息 May.,2017 第 15 卷第 5 期 GEOSPATIAL INFORMATION Vol.15,No.5 doi:10.3969/j.issn.1672-4623.2017.05.012 分区存储技术在地理国情普查数据库中的应用 1,2 1,2 1,2 胡小彭 ，任家锋 ，魏雪梅 （1. 安徽省基础测绘信息中心，安徽 合肥 230031 ； 2. 安徽省智慧城市与地理国情监测重点实验室，安徽 合肥 230031） 摘 要 ：分析了 Oracle 数据库分区存储技术，并通过 ArcSDE 空间数据库引擎，提出了一种基于分区存储技术的空间数据入库 解决方案。根据地理国情普查数据的特点，设计了对应的数据分区存储策略；并将其应用于安徽省地理国情普查数据库建设中。 测试结果表明，分区存储数据库的读取效率明显高于非分区存储数据库。 关键词 ：地理国情普查 ；分区存储 ；空间数据 ；数据库 中图分类号 ：P208 文献标志码 ：B 文章编号 ：1672-4623（2017）05-0039-03 地理国情普查是一项重大的国情国力调查，是全 一致，但各分区可存储在不同的表空间中。由于各 面获取地理国情信息、掌握地表自然、生态以及人 分区的逻辑属性完全一致，对分区后的表来说，可 类活动基本情况的重要手段和基础性工作 [1] 。安徽省 用同样的 SQL 语句进行操作，没有增加用户操作数 第一次地理国情普查是与全国各省、市、区同步进 据库的复杂度 [5-6] 。分区存储的优点为 ：①提高读取 行的一项重要工作。地理国情普查成果数据具有庞 效率，用户可只在感兴趣目标分区中进行查询，从 大、复杂、多样化且存储分散等特点，为实现成果 而提高数据读取的效率 ；②维护方便，可单独备份 数据的集中存储、安全管理与高效应用，需要建立 和恢复每个分区 ；③隔离故障，若表的某个分区出 完整且空间连续的地理国情普查数据库，以满足普 现故障，但不影响表在其他分区数据的使用，增强 查成果数据管理、分发应用、统计分析和地理国情 了数据的可用性 ；④均衡 I/O，将不同分区映射到 监测的需求 [2] 。 不同的磁盘以平衡系统的 I/O 效率，提高了并发性， 地理国情普查数据库建设的内容包括地理国情普 改善了系统性能。 查成果数据、专题数据和地理国情统计分析成果数据 Oracle 的表分区方法分为范围分区、列表分区、 等 [3] 。其中，地理国情普查成果数据中的地表覆盖、 散列分区和组合分区 4 种 [7] ，具体方法为 ： 道路网络和水域网络等要素数量多、数据量大，可采 1）范围分区 ：按范围对数据表中的某个值进行分 取分区存储策略，将其存储在不同的物理空间，以提 区，如根据行政区划分区，将不同行政区划内的数据 高数据的存储和访问性能，并可有效隔离数据故障 [4] 。 存储到对应的分区表中。 在数据库建库过程中，当数据库的表过大时，通 2）列表分区 ：对分区字段的离散值进行分区，可 常会采用分区存储的策略，例如在 Oracle 中会采用分 按照自然的方式将无序和不相关的数据集合进行分区。 区表的形式，按照业务特征对表进行分区，达到提高 3）散列分区 ：基于分区字段的 Hash 值，自动将 存储性、可管理性和可用性的目的。同样，也可通过