WebLogic-Server-故障诊断.ppt

议程 故障诊断的模式 Thread Dump WebLogic Server 工作线程 典型问题及解决方案 Server Crash Server Hang High CPU 故障诊断的模式 准确描述现象：平台、版本、操作、信息 使用工具收集数据 使用工具分析数据 尝试解决问题 给出最佳解决方案 总结经验并加以重用 议程 故障诊断的模式 Thread Dump WebLogic Server 工作线程 典型问题及解决方案 Server Crash Server Hang High CPU Thread Dump JVM中所有活动线程的快照。 一个可读的文本。 获取Thread Dump 在 Unix 平台上 kill -3 <PID> 在 Windows 平台上 设置DOS 窗口的属性：Layout -> Screen Buffer Size-> Height 9999。 同时按下CTRL-BREAK 找到Thread Dump的最开始的位置："Full thread dump. " 对于WebLoigc Server，还可使用 weblogic.Admin THREAD_DUMP 前提条件：服务器可以Ping通。 获取失败时刻的Thread Dump 启动 JVM 时，加入参数： Sun JVM: -XX:+ShowMessageBoxOnError JRockit JVM: -Djrockit.waitonerror 当JVM崩溃时，会弹出窗口： Do you want to debug the problem? 不要选择Yes/No，获取此时的Thread Dump。 Thread Dump: JDK1.5 Thread t@41: (state = BLOCKED) - java.lang.Object.wait(long) (Interpreted frame) - java.lang.Object.wait(long) (Interpreted frame) - java.lang.Object.wait() @bci=2, line=474 (Interpreted frame) - org.apache.tomcat.util.threads.ThreadPool$ControlRunnable.run() @bci=19, line=642 (Interpreted frame) - java.lang.Thread.run() @bci=11, line=595 (Interpreted frame) Thread Dump: JDK1.5 议程 故障诊断的模式 Thread Core Dump WebLogic Server 工作线程 典型问题及解决方案 Server Crash Server Hang High CPU 工作线程 两个线程池 Socket Reader 线程池 Execute 线程池 Listen 线程 所有的请求都要由该线程放入请求队列中。 如果该线程“丢失” ，将没有任何“工作”可做。 该线程应该始终处在 socketAccept方法中。 Socket Reader 线程 从请求队列中获取请求，并将请求放入执行队列中。 默认情况下，有5个socket reader线程（Exceute线程个数的33% ） 其中一个执行 poll功能。 其它的处理请求。 Socket Reader Thread Dump Execute 线程 议程 故障诊断的模式 Thread Dump WebLogic Server 工作线程 典型问题及解决方案 Server Crash Server Hang High CPU Server Crash 现象描述 Server 进程崩溃，产生server core文件。 server core文件是 JVM 崩溃时的进程快照。 在Unix平台上，server core文件位于启动Server进程的目录中。 在Windows平台上，server core文件位于\Windows\Drwatson目录中：Watsonxxx.wlg。 引起Server Crash的原因 Java代码只能导致Java 异常，不会导致Server Crash。 Native code：C 或 C++，是导致Server Crash的元凶。 Native code 存在于： WebLogic Server native performance packs Type 2 JDBC drivers 通过Java Native Interface (JNI) 调用的native libraries JVM 自身 Server Crash故障排查 1.WLS Native Perf