火眼金睛,Java诊断利器Arthas

2022-10-14,,,

1 简介

arthas 是alibaba开源的java诊断工具,深受开发者喜爱

当你遇到以下类似问题而束手无策时,arthas可以帮助你解决:

  • 这个类从哪个 jar 包加载的?为什么会报各种类相关的 exception?
  • 我改的代码为什么没有执行到?难道是我没 commit?分支搞错了?
  • 遇到问题无法在线上 debug,难道只能通过加日志再重新发布吗?
  • 线上遇到某个用户的数据处理有问题,但线上同样无法 debug,线下无法重现!
  • 是否有一个全局视角来查看系统的运行状况?
  • 有什么办法可以监控到jvm的实时运行状态?

arthas支持jdk 6+,支持linux/mac/winodws,采用命令行交互模式,同时提供丰富的 tab 自动补全功能,进一步方便进行问题的定位和诊断

2 主要功能

arthas提供的功能主要可以分为以下3个方面:

  • (1) 信息监控
    • 进程运行基本信息:内存、cpu占用、线程信息、线程堆栈、线程数统计、环境变量信息
    • 对象信息:类对象静态属性、 mbean 的属性信息、已加载类信息、类加载器、类方法信息
  • (2) 方法调用
    • 方法调用入参、返回值查看
    • 方法被调用的调用路径、调用耗时、方法调用次数、成功次数、失败次数等统计
    • 记录和重做方法调用
  • (3) 类文件处理
    • dump已加载类的字节码、字节码反编译、类编译、类重新热加载

3 安装和使用

3.1 安装

下载arthas-boot.jar,然后用java -jar的方式启动:

wget https://alibaba.github.io/arthas/arthas-boot.jar
java -jar arthas-boot.jar

然后输入进程对应编号,进入arthas的命令交互界面即可使用:

打印帮助信息:

java -jar arthas-boot.jar -h

3.2 使用

下面介绍arthas的一些常用的命令和用法和原理,看看是如何解决我们实际中的问题的,命令详情可以参考arthas的官方文档

(1) 整体dashboard数据

在arthas的命令行界面,输入dashboard命令,会实时展示当前tomcat的多线程状态、jvm各区域、gc情况等信息

(2) 查看线程监控

输入thread命令,会显示所有线程的状态信息
输入thread -n 3会显示当前最忙的3个线程,可以用来排查线程cpu消耗
输入thread -b 会显示当前处于blocked状态的线程,可以排查线程锁的问题

(3) jvm监控

输入jvm命令,查看jvm详细的性能数据

(4) 观察方法参数、返回值

有时排查问题中我们需要查看参数,返回值,通常的需要加日志打印,比较繁琐,基于watch命令我们可以很方便做到这一切

$ watch demo.mathgame primefactors "{params,returnobj}" -x 2
press ctrl+c to abort.
affect(class-cnt:1 , method-cnt:1) cost in 44 ms.
ts=2018-12-03 19:16:51; [cost=1.280502ms] result=@arraylist[
    @object[][
        @integer[535629513],
    ],
    @arraylist[
        @integer[3],
        @integer[19],
        @integer[191],
        @integer[49199],
    ],
]

(5) 观察方法调用路径,耗时详情

有时会遇到服务卡顿,想排查到底哪个步骤耗时比较久,通常做法是加日志,使用trace命令可以很方便解决这个问题:

$ trace demo.mathgame run
press ctrl+c to abort.
affect(class-cnt:1 , method-cnt:1) cost in 42 ms.
`---ts=2018-12-04 00:44:17;thread_name=main;id=1;is_daemon=false;priority=5;tccl=sun.misc.launcher$appclassloader@3d4eac69
    `---[10.611029ms] demo.mathgame:run()
        +---[0.05638ms] java.util.random:nextint()
        +---[10.036885ms] demo.mathgame:primefactors()
        `---[0.170316ms] demo.mathgame:print()

4 实现原理

整体宏观模块调用图如下:

篇幅原因,下面对其其中涉及的比较核心的2个原理进行简单介绍:

(1) 信息监控、类文件处理

jdk提供的jmx(java management extensions java管理扩展,是一个为应用程序植入管理功能的框架),jmx管理管理了一系列mbean对象,arthas正是基于这些mbean对象实现内存、gc、类加载信息、jvm信息监控

(2) 方法调用

从jdk5之后,引入了java.lang.instrument,程序员通过修改方法的字节码实现动态修改类代码。在代理类的方法中的参数中,就有instrumentation inst实例。通过该实例,我们可以调用instrumentation提供的各种接口。比如调用inst.getallloadedclasses()得到所有已经加载过的类。调用inst.addtransformer(new sdltransformer(), true)新增转换器。调用inst.retransformclasses(class cls),向jvm发起重转换请求

arthas使用asm生成增强后的类的字节码,增强的功能包括方法调用入参、返回值查看、方法调用统计、方法调用记录和重做,再基于jdk提供的instrumentation接口对方法进行增加和转换

5 实战案例

arthas官方文档提供了许多用户案例,下面介绍几个比较有意思的案例:

(1) 排查应用奇怪日志来源

服务应用运行中有时会出现一些奇怪日志,排查定位这些日志的来源比较麻烦
通过修改stringbuilder的实现代码打印出日志的调用堆栈信息,编译生成stringbuilder.clss,再基于arthas提供的redefine命令修改应用中使用的stringbuilder的实际使用字节码

(2) 排查springboot应用401/404问题

页面访问返回401/404,碰到这种问题时,通常很头痛,特别是在线上环境时
通过arthas提供的trace命令,打印出页面访问时的完整请求树,定位出具体哪个servlet返回404

$ trace javax.servlet.servlet *
press ctrl+c to abort.
affect(class-cnt:7 , method-cnt:185) cost in 1018 ms.

通过trace命令,trace对象是javax.servlet.filter定位具体哪个filter拦截请求定位返回401的问题来源

$ trace javax.servlet.filter *
press ctrl+c to abort.
affect(class-cnt:13 , method-cnt:75) cost in 278 ms.

(3) 线上代码热更新

有时为了快速验证线上问题的修复方案,或者为了快速测试,我们需要热更新代码
arthas提供的解决步骤如下

  • 步骤1 jad命令反编译代码
  • 步骤2 文本编辑器修改代码
  • 步骤3 sc命令查找代码所在类的classloader
  • 步骤4 mc命令指定classloader编译代码
  • 步骤5 redefine命令热更新代码

参考

arthas官方文档

arthas快速入门

6到飞起的java诊断工具arthas

解密阿里线上问题诊断工具arthas和jvm-sandbox

《火眼金睛,Java诊断利器Arthas.doc》

下载本文的Word格式文档,以方便收藏与打印。