大型数据中心数据库表容量管理工具实现.pdfVIP

大型数据中心数据库表容量 管理工具实现 中国农业银行数据中心 张乾尊耿挥 随着金融产品不断丰富，数据库管理系统的数量也 一、数据库管理现状 在迅速增加。 传统运维管理通过监控软件对数据库级别 的整体容量信息进行采集和监控，只能大致了解数据库 在传统数据库运维管理模式下，系统运维人员通过 整体性能，并无相应的监控采集分析工具对数据库内部 两种方式获得数据库的运行状况。 一是利用数据库实时 细节变化进行追踪和分析，不利于系统管理员精准分析 监控工具，监控数据库整体运行层面的指标，包括数据 和评估数据库运行状况，导致生产运维中存在较大的潜 库空间、数据库日志信息、查询事物的运行情况、数据 在风险。 如何利用运维自动化工具对数据库系统进行精 库锁使用情况、内存和CPU 使用情况、磁盘lO 等; 二 细化管理，成为亟待解决的问题。 本文以农业银行数据 是对数据库系统进行周期性检查，先人工登录数据库系 中心为例，探讨数据库系统自动化运维管理方法的思路 统采集数据库整体性能指标、数据库典型表或重要表的 和实践。 容量变化情况、数据库配置规范性、数据库日志变化等 64 FI叫CIAL COMPUTER OF 剧M IT运维 IT Running and Maintenance 内容，再进行分析，进而发现数据库的潜在问题。 1.容量管理 长期以来，上述两种方式有效保障了数据库系统安 数据库用户表和索引的统计信息存储于相关系统表 全稳定运行，但由于数据库实例数量的不断增长和系统 中，为满足数据库运维需要，农业银行数据中心设计了 运行连续性要求的不断提高，现有工具已无法满足数据 部分采集统计信息存储过程，即通过集中格式化存储至 库运维管理的实际需求，主要表现在以下三个方面。 数据库，用于直观反映数据库系统中各个表和索引的统 首先，对于规模快速增长的数据库系统，采用传统 计信息。采集的信息可根据需要不断增加，易于扩展。 运维管理模式需要运维人员大量重复手工操作，人力、 如图 1 所示，数据库表采集信息包括表的行数（row 时间成本较高，存在误操作风险和操作记录难以追溯等 count）、 转 移 的 行 数（forwrowcnt）、 已 删 除 的 行 数 问题。 （delrowcount）、表分配页数（oampagecn）、OAM 页 其次，由于数据库实例数量的增加，定期巡检周期 和表分配页数（oamapgcnt）、数据页聚簇度（dpcr）、 间隔较长，无法及时发现数据库表容量变化导致的问题。 表空间使用率（sput）。表的索引采集信息包括索引名 通常在数据库性能或功能已经出现问题后，才对数据库 称（index name）、索引数据页聚簇度（dpcr）、索引 中各个表和配置参数进行排查分析，寻找触发问题的具 页聚簇度（ipcr）、索引空间使用率（sput）、索引页使 体原因，这就无法保障问题事件处理的时效性。 用率（page utility）。 再次，数据库监控局限于整体情况、数据库空间、 如图 2 所示，每日在非业务高峰期，各数据库实例 日志信息等数据库宏观运行指标，对数据库容量等微观 服务器由脚本自动调用执行上述存储过程，采集数据表 指标变化没有进行有效监控。例如当数据库系统中个别 表的记录数或占用空间情况发生变化时，会