大型数据库分区表的研究.docVIP

大型数据库分区表的研究 　　【摘要】 分区表在大型数据库特别是分布式数据库中占有重要地位，分区是一种“分而治之”的技术，为大量数据提供了可伸缩的性能，提高了对巨型数据库的读写和查询速度。本文主要研究了分布式数据库Oralce 中的List分区表和Range分区表的创建与应用，探讨了其切割和分区表的修改技术。从而可以类推分区表在其它数据库关系系统如大数据中Hive中的应用。 　　【关键字】 大型数据库Oracle list分区表 range 分区表 分区表的切割 　　一、引言 　　分区表应用在大型的分布数据库中，分区是一种“分而治之”的技术，通过将大表引分成可以管理的小块，从而避免了对每个表作为一个大的、单独的对象进行管理，为大量数据提供了可伸缩的性能，提高了巨型数据库的读写和查询速度。 　　分区表是将一个大的表分割成较小的片段（分区），在实际应用中，分区表的操作是在独立的分区上，但是对用户而言是透明的 [1][2] 。Oracle提供了分区技术以支持VLDB（Very Large DataBase）。分区表通过对分区列的判断，把分区列不同的记录，放到不同的分区中。分区完全对应用透明。Oracle的分区表可以包括多个分区，每个分区都是一个独立的段（SEGMENT），可以存放到不同的表空间中。查询时可以通过查询表来访问各个分区中的数据，也可以通过在查询时直接指定分区的方法来进行查询。 　　分区表的主要优点为： 　　（1）由于将数据分散到各个分区中，减少了数据损坏的可能性；（2）可以对单独的分区进行备份和恢复；（3）可以将分区映射到不同的物理磁盘上，来分散IO；（4）提高可管理性、可用性和性能。 　　什么时候需要分区表，官网给出了2个建议： 　　（1）Tables greater than 2GB should always be considered for partitioning. 　　（2）Tables containing historical data， in which new data is added into the newest partition. A typical example is a historical table where only the current month’s data is updatable and the other 11 months are read only. 　　二、分区表的创建和应用 　　Oracle 10g以上版本提供了以下几种分区类型： 　　（1）范围分区（range）；（2）哈希分区（hash）；（3）列表分区（list）；（4）范围-哈希复合分区（range-hash）；（5）范围-列表复合分区（range-list）。 　　这里以应用广泛的list分区和range分区为例说明分区表的应用。 　　2.1 list 分区表 　　List分区（列表分区）： 通过列表方法（指定字符串值方法）进行分区。 List分区表需要考虑分区的依据，分区的名字，分区值（或者值的区域）每个分区所在的表空间。在分区时必须确定分区列可能存在的值，一旦插入的列值不在分区范围内，则插入/更新就会失败，因此通常建议使用list分区时，要创建一个default分区存储那些不在指定范围内的记录，类似range分区中的maxvalue分区。 　　create table part_book1 　　（ bid number（4）， 　　bookname VARCHAR2（20）， 　　bookpress VARCHAR2（30）， 　　booktime date） 　　partition by list（bookpress） 　　（partition part1 values（‘清华大学出版社’） tablespace system， 　　partition part2 values（‘教育出版社’） tablespace users）； list分区表的插入同普通表，如下： 　　SQL insert into part_book1 values（1，’oralce’，’清华大学出版社’，to_date（，’yyyymmdd’））； 　　SQL insert into part_book1 values（2，’音乐基础欣赏’，’教育出版社’，to_date（，’yyyymmdd’））； 　　list分区表可以分区查询，如下： 　　SQL select * from part_book1 partition（part1）； 　　创建或修改分区时，可以指定default，把非分区规则的数据，全部放到这个