2025年金融行业科技部技术员系统故障排查手册.docxVIP

2025年金融行业科技部技术员系统故障排查手册

第1章基础环境配置与网络连通性诊断

1.1服务器硬件资源监测与性能基线校准

需登录服务器管理界面并执行`top`或`htop`命令，实时观察CPU使用率、内存占用率及磁盘I/O等待时间；若发现某节点CPU持续超过85%且内存使用率接近100%，应立即启动`vmstat1`查看系统负载类型，确认是否为突发性高负载导致，并检查`dmesg`日志中是否存在OOM（OutofMemory）错误，必要时通过`kswapd-t`调整内存交换参数。针对磁盘性能，需定期运行`iostat-x1`命令，重点监控`rdma_write_bytes/sec`、`rdma_read_bytes/sec`及`rdma_read_bytes/second`指标，若发现`rdma_read_bytes/second`长期低于500MB/s且伴随`rdma_write_bytes/second`低于100MB/s，则表明存储网络存在瓶颈，需检查光纤连接状态及交换机端口速率。

利用`nload`工具对CPU进行负载测量，观察其是否呈现为`0.000`或`0.001`这种极低的数值，若数值接近1.0则说明系统处于满载状态，此时应结合`vmstat1`分析