企业海量数据库的优化.pdf

·30 · 计算机应用研究 2005 年 企业海量数据库的优化* 王晓伟，李海峰，李 禺 （东南大学 软件学院，江苏 南京210096 ） 摘 要：当前大多数企业应用软件都需要数据库支持，而且数据库的规模在不断扩大，尤其用到数据仓库技术 的商业智能化支持系统。面对大数据量，企业级应用的性能愈来愈依赖数据库的性能。对数据库性能要素进行 全面的描述和分析，以便对数据库的选择、应用和基于数据库的二次开发提供工程参考。 关键词：数据分割；数据仓库；并行数据库；数据库管理系统；SOL 优化 中图法分类号：TP311. 13 文献标识码：A 文章编号：1001- 3695（2005 ）04- 0030- 03 Optimization of Massive Database WANG Xiao-wei ，LI Hai-feng ，LI Yu （School of Sof tware ，Southeast Uniuersity ，Nanj ing Jiangsu 210096 ，China ） Abstract ：Today ，most enterprise appiications need a support from databases expanding ，just iike data warehouse ，in order to support BI. At the same time ，the reguirement for performance is standing out. In this paper ，a fuii-scaie anaiysis about the optimization of massive database has been processed. Key words ：Data Partition ；Data Warehouse ；Paraiiei Database ；Database Management System ；SOL Optimization 能问题，主要因素是处理器、 从20 世纪90 年代中叶起，随着网络技术的突飞猛进，信 I/ O、内存和网络。判断硬件是否 息出现了爆炸式增长。今天， 工作在最优状态，如何才能把硬件部件优化到最优状态，要求 1TB 以上的数据库正变得愈来愈 常见。美国NASA 发射的用于地球观察的卫星每年就发回 对每一种硬件资源有一定的了解。一般，遇到硬件瓶颈除了调 1 000TB 数据；美国劳伦斯国家实验室的一项粒子碰撞试验每 整现有的硬件之外，还有可能需要增加另外的硬件才能解决问 年产生300TB 数据；美国数字图书馆每年的增加1TB 的数据； 题。硬件层优化主要是：提高数据库系统物理的处理能力和吞 通信业的数据库要求千兆字节以上；电子商务、产业信息化等 吐量以大幅提高数据库性能。在数据量愈来愈大，并行访问的 企业级应用，尤其用到数据仓库技术的一类数据库，要求的支 用户愈来愈多的情况下，经济有效地提高数据库系统的吞吐量 撑数据库也有几百、几千兆字节容量，如用于商业智能化的企 和减少事务的响应时间成为数据库系统发展的关键问题。在 业决策支持系统。 企业级的实际解决方案中，在很大程度上应用合理与否决定数 面对大数据量，企业级应用的性能愈来愈依赖数据库的性 据库性能。要做到应用合理， SOL 语句是重点。SOL 是面向结 能，企业