PostgreSQL典型故障案例及处理方法.pptxVIP

PostgreSQL典型故障案例及处理方法 李长军

1故障快速恢复tianjiamulubiaotineirongwenzi2数据库常见问题及原因tianjiamulubiaotineirongwenzi3典型案例及处理方法tianjiamulubiaotineirongwenzi录目Contents

01

只读实例数据AZ1 APP1故障切换数据备份读/写数据RDSforPostgreSQL云服务架构备份（全量、增量）OBS创建、启动监控、管理弹性伸缩备份开发APPRDS主实例故障切换-----备实例应用程序读/写高可用高可靠开发者用户恢复（任意时间点）读/写数据库集群只读数据复制APP2读/写备主用户只读AZ2…

快速恢复?重启?倒换?kill进程?…快速定位?监控?告警?健康诊断?智能运维?…故障模式库应急预案工具能力人员能力故障演练1分钟定界、3分钟定位、10分钟快速恢复

02

慢 单个SQL hang:单个SQL宕 底层故障错数据丢失满磁盘数据损坏执行报错CPU内存IO配置文件错误整体SQL慢复制进程WAL损坏备份慢复制慢写操作控制文件损坏

CPU满及常见原因

内存满及常见原因

磁盘满及常见原因

IO满及常见原因

慢SQL及常见原因

1.初始化，构造带toast记录的测试表createtabletb1_toast(c1int,c2text);altertabletb1_toastalterc2setSTORAGEEXTERNAL;insertintotb1_toastselectid,repeat(md5(id::text),10000)fromgenerate_series(1,5000)id;2.发布端，创建发布createpublicationpub1;3.订阅端（另外的实例）createsubscriptionsub1connectionhost=xxx.xxx.xxx.xxxpublicationpub1;4.发不断，执行以下添加字段的DDL（该DDL会导致表重写，并产生大量WAL）altertabletb1_toastaddcolumnidbigserial;4.解决方案案例1：对带toast大字段的大表实施定义变更导致PG数据库OOM1.复现方法2.TOP查看内存占用1.升级PostgreSQL版本到12.8以上；2.避免altertable重写带大量toast大字段的表；3.先删除逻辑复制和复制槽,altertable执行完成后再重建逻辑复制；3.查看内存上下文gdb--batch-silent-excallMemoryContextStatsDetail(TopMemoryContext,100)-p126510

1.复现方法1.建表并初始化数据CREATETABLEtbpart(idint,c1int)PARTITIONBYHASH(c1);createtabletbpart_0partitionoftbpartforvalueswith(MODULUS4,remainder0);createtabletbpart_1partitionoftbpartforvalueswith(MODULUS4,remainder1);createtabletbpart_2partitionoftbpartforvalueswith(MODULUS4,remainder2);createtabletbpart_3partitionoftbpartforvalueswith(MODULUS4,remainder3);insertintotbpartselectid,idfromgenerate_series(1id;