邯钢业务数据管理优化方法的研究和实施.docVIP

邯钢业务数据管理优化方法的研究和实施 　　摘要:文章主要介绍了邯钢现有ERP系统实施数据归档来优化业务数据管理的过程,即将系统中在某一时间段以前的很少访问的主数据和交易数据按照制定的策略从系统中抽取出来,并将其存储到其他介质中,释放存储空间,提高系统性能,使以后系统数据达到相对稳定。 　　关键词:ERP;业务数据管理优化;数据归档;数据库重组 　　中图分类号:TH122文献标识码:A 　　文章编号:1009-2374#8197;(2010)27-0133-02 　　 　　0引言 　　邯钢ERP系统自2006年1月份启用,到2008年1月系统中业务数据增长至900G,空间占用率达到了总存储空间的80%以上,目前平均每月数据增长30～40G。由于数据的不断增长,一方面需要更大的存储空间存储这些数据,另一方面导致系统性能不断下降,同时也直接影响到下单、生产、发货、账务处理等业务运作的各个环节,从而导致运作效率下降,安全性的降低,维护的难度增大,维护的时间增加,维护的成本增多,随着未来邯钢的业务不断增长,巨大的数据量将越来越成为制约邯钢整个信息化系统进程的关键因素。 　　面对如此严峻的形式,邯钢的技术人员对业务数据的优化进行了深入研究,并结合邯钢的实际情况的基础上,开创性的提出了使用数据归档来优化现有的业务数据。数据归档是指将业务已经完成并且在日常操作中不需要的数据或者很少访问的数据从数据库迁移到归档文件中并将其从数据库中删除的操作,归档以后的数据还能够在线访问,它是一个周期性的过程。这样可以充分利用现有的硬件资源,将ERP系统中不用或是很少访问到的数据迁移到外部的归档系统,减少系统在线数据库的容量,减缓在线数据维护周期,从而实现硬件投资保护,并提高系统的响应时间。在此情况下,邯钢信息化数据归档的项目正式立项。该项目从2007年的调研开始,到2008年9月投运,计划每年进行一次。 　　1业务数据管理优化的几种方法 　　1.1增加系统资源 　　增加系统资源即通过硬件的升级来优化业务数据管理,例如,增加硬盘存储空间,增加内存大小,更换速度更快的CPU或是增加CPU个数等。但是这种作法并不是治本的方法,因为这种作法无法避免系统效能下降再度发生的可能,而且增加了硬件维护成本。 　　1.2数据删除 　　数据删除通常应用于不需要进行归档或者没有标准归档对象的表数据,如SPOOL请求的删除,BATCH-INPUT会话日志,表变更日志,系统日志等。对于这种类型的数据,直接进行数据删除更为有效;但对于一般的商业交易数据,由于商业交易的需求,业务人员可能需要再度读取这些个别的数据对象,甚至这些数据可能是牵涉到法律规章问题的数据,由于审核的需要,这些数据必须要求能够被系统反复的读取。因此,对于这部分业务数据,不能做数据删除的处理。 　　1.3数据归档 　　数据归档能够保证数据库里面的数据空间是以一种优化的方式来管理,这种永久性的管理方式能够让数据重复的被读取以及维护。数据归档适用于历史业务数据,这些数据在将来的业务操作中不会再有变化,所以可以移动到归档文件中并且从在线数据库中删除。归档文件可以存储在外部的归档介质或归档系统中,如光盘库,磁盘阵列或者内置硬盘。归档过的数据并不是“Dead and Buried”,在需要的情况下,这些数据还可以从归档介Reloaded/Retrieved到R/3系统,如图1所示: 　　为此,邯钢决定使用数据归档来优化现有的业务数据。 　　2归档的几个阶段 　　第一阶段:分析和设计 　　此阶段主要包括数据分析、归档对象和表之间的关系分析以及垃圾数据的检查。 　　这些可通过SAP的标准事务来完成。如:表空间分析: 　　DB02-Goto-Tablespaces-Tablespaces 　　数据库历史空间分析: 　　DB02àGotoàTablespacesàHistory of Tablespaces 　　表及索引分析: 　　DB02àTable and indexesàDetailed Analysis 　　表/索引增长历史: 　　DB02àGotoàTable IndicesàHistory of Tab/Ind. 　　自由空间分析: 　　DB02àTablespacesàFreespace statistics 　　第二阶段:归档测试 　　此阶段主要包括包括归档的技术测试、归档完成之后的访问测试以及跨模块的集成测试。在此过程中,我们准备了一台和生产环境同平台的机器进行测试,通过数据库复制的方式将生产系统数据复制到这台测试系统中,这样可以更好的模拟生产环境,使得对于实施归档所需要的时间、归档对象的确定以及归档以后数据的读取有个更准确的预估。 　　第三阶段:生产系