航空结算系统基于Oracle的数据架构解决方案 侯圣文（Secooler）..pptxVIP

航空结算系统基于Oracle的数据架构解决方案 DTCC 2012 - Beijing 侯圣文 (Secooler) Site: www.secooler.me Weibo: secooler Mail: secooler@ MSN: secooler@ QQ:Mobile:About OCMU OCMU: Oracle Certified Master Union About me 姓名：侯圣文 网络ID：Secooler 北京大学理学硕士 获 Oracle OCM认证 OCM联盟()发起人 ACOUG成员 ITPUB 论坛资深版主 DataGuru专家团成员 技术Blog：http://www.secooler.me 微博：/secooler 主要内容 航空结算系统数据库优化概述 航空结算系统数据库优化方向 数据库性能评估及影响因素分析 数据库性能优化实践 数据库优化步骤与方法总结 优化成果 总结 展望 航空结算系统数据库优化概述 航空结算系统后台数据库体系结构 数据量、性能要求、安全方面（信用卡交易） OLTP与OLAP类型相结合 系统优化前后体系结构对比 航空结算系统数据库优化方向 原有OLTP和OLAP混合部署的数据库进行分库处理 优势：独享处理资源、互不干扰 OLTP部分采用Oracle RAC技术构建 应用程序设计优化——最有效途径 SQL代码优化 内存使用优化 数据访问优化 物理存储优化 系统整体吞吐量优化 数据库性能评估及影响因素分析 数据库性能评估指标 系统吞吐量 用户响应时间 数据库命中率 CPU使用情况 内存使用情况 磁盘I/O 数据加载时间 数据库性能评估及影响因素分析 影响数据库性能的因素 应用程序设计 应用程序SQL编码 Hint的乱用 CBO优化器模式的选择 适时使用绑定变量 数据库设计 针对OLTP与OLAP系统，分别优化 数据安全性和可用性 RAC技术 + Dataguard技术 其他 内存使用率、数据加载、网络流量 数据库性能优化实践 应用程序设计优化调整 有效的表设计 引入分区表技术 充分使用CPU资源 使用并行特性完成CTAS 使用并行特性完成索引创建 有效的应用程序设计 制定SQL编写规范 限制动态SQL 数据库性能优化实践 应用程序SQL代码优化调整 SQL执行计划 使用索引技术 使用反向索引降低索引块争用 使用函数索引提高复杂计算效率 索引重建，减少碎片 保证数据的批量提交 使用Hint调整执行计划——OLAP 数据库性能优化实践 数据库设计优化调整 OLTP数据库 密集型事务，以短事务以及小的查询为主 采用Cache技术、B-tree索引技术与绑定变量 OLAP数据库 长事务、大查询 采用分区技术、并行技术与适当考虑使用位图索引 分开设计与优化 针对OLTP和OLAP两种截然不同种类的系统分别进行优化 数据库性能优化实践 数据安全性和可用性优化调整 Oracle RAC技术架构 高可用性 高性能 按需扩充 Data Guard灾备技术结构 物理Data Guard 逻辑Data Guard 数据库性能优化实践 内存使用率优化调整 Oracle内存分配策略实践 OLTP 预留：20、SGA：64、PGA：16 OLAP 预留：20、SGA：40、PGA：40 基于成本的优化器CBO 定期对数据库进行数据统计分析 数据库性能优化实践 数据访问优化调整 本地管理的表空间 字典管理的表空间劣势 自动跟踪表空间里的空闲块 可管理区大小，减少碎片 位图管理方式减少了回滚段信息生成 增加Oracle块大小 OLAP——数据块增加一倍 → 读写性能改进50% 数据库性能优化实践 数据加载操作优化调整 SQL*Loader Direct Path 创建格式化的数据块，直接写入 避免了数据库内核的I/O 远高于Conventional Path模式 使用外部表完成大量数据移迁移 实现查询数据库以外文件中的数据 方便卸载和迁移 数据库性能优化实践 物理存储优化调整 SAME原则（Stripe And Mirror Everything） 条带化以便增加吞吐量 镜像提供在磁盘的容错能力 使用裸设备 消除文件系统的系统开销，20%性能提升 使用ASM（自动存储管理） 规划归档日志所需磁盘空间 数据库性能优化实践 网络流量优化调整 使用物化视图复制数据 借助物化视图日志减少跨库更新的网络流量 使用远程过程调用 由本地应用程序调用的远程存储过程 减少了客户端与服务器端的网络通讯量 数据库性能优化实践 数据分开处理原则 使用分区技术 改善查询性能、改进数据库的可用性 分区设置nologging减少大型事务的影响 exchange partition提高系统可用