从内存故障到CPU过高诊断案例(下).pdfVIP

从内存故障到CPU过高诊断案例 姜劲松，英文名：Moone 云和恩墨工程技术 中心Oracle专家  25年IT从业经验 、资深数据库及系统软硬件集成专家 ；  历任开发工程师 、项 目经理 、技术经理 、项 目总监 、系统集成设计专家 、运维主管 、云平台架构师等职位 ；  百万级用户规模营销账务系统研发及实施运维经验 ；  主持过11省千万级电力营销业务系统运维主管工作 ；  设计实施过10多个阿里云平台新能源SAAS系统 ；阿里总部阿里云专有云L2运维专家及故障REVIEW主管等工作 ；  Oracle OCPMySQL OCPRHCE阿里云ACP等认证专家 ；现任云和恩墨工程技术中心Oracle技术专家 。 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 目录 上期PPT：/doc/2835 回放合集：/course/49 提问的智慧 VS 5W2H分析法 内存故障案例Tables过大 内存故障案例-文件句柄溢出 CPU高案例-CHM利与弊 CPU高案例-丢失的主频 误删除数据库文件 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 • 相关的数据库alertlog，服务器syslog等均未发现明显异常报警 。 • awr报告 比较(First异常时段 、Second正常时段) 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 使用11g新增的CHM收集OS数据 。 Cluster Health Monitor （以下简称CHM ）是一个Oracle提供 的工具，用来 自动收集操作系 统的资源 （CPU 、内存 、SWAP 、进程 、I/O 以及 网络等）的使用情况 。 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 • 发现了异常的osysmon.d进程的高CPU消耗，并且cpuq严重阻塞 • 打开文件句柄高达 10万，osysmond.bin就是CHM采集OS日志的进程，长期消耗很高的CPU资源！ 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 解释如下： 当AIX平台有大量磁盘或者打开了大量文件句柄时，由于AIX和 Oracle的配合 问题导致BUG产生 。 数 / 据 / 驱 / 动 成 / 就 / 未 / 来 CPU高案例-CHM利与弊 查看对应BUG文档说 明,确认 ： 数 / 据 /