Oracle 大数据量操作优化.docx

如何加速Oracle大批量数据处理一、提高DML操作的办法：　　简单说来：　　１、暂停索引，更新后恢复.避免在更新的过程中涉及到索引的重建.　　２、批量更新，每更新一些记录后及时进行提交动作.避免大量占用回滚段和或临时表空间.　　３、创建一临时的大的表空间用来应对这些更新动作．　　4、批量更新，每更新一些记录后及时进行提交动作.避免大量占用回滚段和或临时表空间.　　5、创建一临时的大的表空间用来应对这些更新动作．　　6、加大排序缓冲区　　alter session set sort_area_size=100000000;　　insert into tableb select * from tablea;　　commit;　　如果UPDATE的是索引字段，就会涉及到索引的重建，暂停索引不会提高多少的速度，反而有可能降低UPDATE速度，　　因为在更新是索引可以提高数据的查询速度，重建索引引起的速度降低影响不大。　　ORACLE优化修改参数最多也只能把性能提高15%，大部分都是SQL语句的优化！　　update总体来说比insert要慢：　　几点建议：　　1、如果更新的数据量接近整个表，就不应该使用index而应该采用全表扫描　　2、减少不必要的index，因为update表通常需要update index　　3、如果你的服务器有多个cpu，采用parellel hint，可以大幅度的提高效率　　另外，建表的参数非常重要，对于更新非常频繁的表，建议加大PCTFREE的值，以保证数据块中有足够的空间用于UPDATE，从而降低CHAINED_ROWS。　　二、各种批量DML操作：　　（1）、oracle批量拷贝：　　setarraysize 20　　setcopycommit 5000　　copy from username/password@oraclenameappend table_name1　　using select * from table_name2;　　（2）、常规插入方式：　　insert into t1 select * from t;　　为了提高速度可以使用下面方法，来减少插入过程中产生的日志:　　alter table t1 nologging;　　insert into t1 select * from t;　　commit;　　(3)、CTAS方式：　　create table t1　　as　　select * from t;　　为了提高速度可以使用下面方法，来减少插入过程中产生的日志，并且可以制定并行度:　　create table t1 nologging parallel(degree 2) as select * from t;（4）、Direct-Path插入：　　insert /*+append*/ into t1 select * from t;　　commit;　　为了提高速度可以使用下面方法，来减少插入过程中产生的日志：　　alter table t1 nologging;　　insert /*+append*/ into t1 select * from t;　　Direct-Path插入特点：　　1、 append只在insert … select …中起作用，像insert /*+ append */ into t values(…)这类的语句是不起作用的。在update、delete操作中，append也不起作用。　　2、 Direct-Path会使数据库不记录直接路径导入的数据的重做日志，会对恢复带来麻烦。　　3、Direct-Path直接在表段的高水位线以上的空白数据块中写数据，不会重用高水位线以下的空间，会对空间的使用造成一定的浪费，对查询的性能也会造成一定的影响。而常规插入会优先考虑使用高水位线之下有空闲空间存在的数据块。因此理论上Direct-Path插入会比常规插入速度更快，因为Direct-Path直接使用新数据块，而常规插入要遍历freelist获取可用空闲数据块，如果同nologging配合，这种速度优势会更加明显。　　4、以append方式插入记录后，要执行commit，才能对表进行查询。否则会出现错误：ORA-12838: 无法在并行模式下修改之后读/修改对象。　　5、用append导入数据后，如果没有提交或者回滚，在其他会话中任何对该表的DML都会被阻塞（不会报错），但对该表的查询可以正常执行。　　6、在归档模式下，要把表设置为nologging，然后以append方式批量添加记录，才会显着减少redo数量。在非归档模式下，不必设置表的nologging属性，即可减少redo数量。如果表上有索引，则append方式批量添加记录，不会减少索引上产生的redo