调试大规模服务器集群的五大策略.docVIP

调试大规模服务器集群的五大策略 Alex Zhitnitsky现就职于Takipi，其经常帮助Java、Scala开发人员解决服务器端的错误和对常用软件进行测试。本文是Alex分享的一些经验。 ： IDE中进行要困难很多。断点，单步执行等都会变得非常奢侈。因此要做的第一件事是要做出周密的调试计划，否则漫无目的单纯依靠日志记录的做法，将是非常低效的。其次，规模越大的架构会更容易出现差错。因此，如何筛查出错误源头，明确哪个步骤出错是非常重要的。 志 Logback调节的7个方法。 ？ ID 也是很重要的。它能有助于处理异常，因为事务ID经常会贯穿于节点、进程、线程之间。一个较好的处理方法是在App的每个线程入口生成一个UUID。然后 把该ID附加到日志记录中，进行全程监视。该方法在分布式和异步日志中起着举足轻重的作用，特别是与日志管理工具如Logstash和Loggly等一起 使用时。 理 Java中进行下面的代码编写： [js] view plaincopy public?static?void?Thread.setDefaultUncaughtExceptionHandler(?? ?? ???UncaughtExceptionHandler?eh);?? ?? void?uncaughtException(?Thread?t,?Throwable?e)?{?? ?? ???logger.error(“Uncaught?error?in?thread?“?+?t.getName(),?e);?? ?? }?? Tomcat或Akka框架有点类似。最后这里给出三种处理未知异常时的方法： 1.? ID先附加到线程，然后在结束时移除掉。 2.? (Thread-local storage，TLS)：这是一种使线程特定数据从线程对象分离的方法。借助这些特定数据能便于对出现的错误进行排查。例如事务ID，时间或用户名。否则在欠缺这些数据和线程名的情况下，我们将不得不花费更多时间来处理未知异常。 3.? (Mapped Diagnostic Context，MDC)：MDC类似于本地线程概念，是日志框架的一部分如Log4j或Logback。它在日志级别生成了一个静态映射表，能够较TLS实现更多高级特性。 Jstack Jstack对Java开发者来说并不陌生，这是一款强大的JDK工具。简单来说，Jstack能够进入一个正在运行的进程然后输出所有的线程meta信息，例如堆跟踪，框架，锁等等。此外它能够对已销毁的进程进行heap dumps或core dumps分析。 Jstack是用在回顾的环节，如果错误已经发生，它反馈的可能是过时的信息。因此如何更主动地使用Jstack是关键所在。例如，设置一个吞吐量阀值然后在该值下降时启动jstack。 [js] view plaincopy public?void?startScheduleTask()?{?? ?? ?? ???scheduler.scheduleAtFixedRate(new?Runnable()?{?? ?? ???????public?void?run()?{?? ?? ?? ???????????checkThroughput();?? ?? ?? ???????}?? ?? ???},?APP_WARMUP,?POLLING_CYCLE,?TimeUnit.SECONDS);?? ?? }?? ?? ?? private?void?checkThroughput()?? ?? {?? ?? ???int?throughput?=?adder.intValue();?//the?adder?is?inc’d?when?a?message?is?processed?? ?? ?? ???if?(throughput??MIN_THROUGHPUT)?{?? ?? ???????Thread.currentThread().setName(Throughput?jstack?thread:??+?throughput);?? ?? ???????System.err.println(Minimal?throughput?failed:?executing?jstack);?? ?? ???????executeJstack();??//?See?the?code?on?GitHub?to?learn?how?this?is?done?? ?? ???}?? ?? ?? ???adder.reset();?? }?? 三、 Stateful Jstack Jstack应用时需要注意的另一个问题是由于它会返回非常多的线程meta数据，如果缺乏相关的实际状态数据，将会对错误排查造成不便。