Arthas

云栖号资讯：【 点击查看更多行业资讯 】 在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！ 阿里妹导读：软件工程领域存在一个共识：维护代码所花费的时间要远多于写代码。而整个代码维护过程中，最惊心动魄与扣人心弦的部分，莫过于问题排查（Trouble-shooting）了。特别是那些需要 7x24 小时不间断维护在线业务的一线服务端程序员们，大大小小的问题排查线上救火早已成为家常便饭，一不小心可能就吃成了自助餐 —— 竖着进躺着出，吃不了也兜不住。本文分享作者在服务端问题排查方面的一些经验，包括常见问题、排查流程、排查工具，结合实际项目中发生过的惨痛案例进行现身说法。 一 问题排查 1 常见问题 Know Your Enemy：知己知彼，百战不殆。 日常遇到的大部分问题，大致可以归到如下几类： 逻辑缺陷：e.g. NPE、死循环、边界情况未覆盖。 性能瓶颈：e.g. 接口 RT 陡增、吞吐率上不去。 内存异常：e.g. GC 卡顿、频繁 FGC、内存泄露、OOM 并发/分布式：e.g. 存在竞争条件、时钟不同步。 数据问题：e.g. 出现脏数据、序列化失败。 安全问题：e.g. DDoS 攻击、数据泄露。 环境故障：e.g. 宿主机宕机、网络不通、丢包。 操作失误：e.g. 配置推错、删库跑路（危险动作，请勿尝试..）。 上述分类可能不太完备和严谨，想传达的点是

前言 本文总结了一些常见的线上应急现象和对应排查步骤和工具。分享的主要目的是想让对线上问题接触少的同学有个预先认知，免得在遇到实际问题时手忙脚乱。毕竟作者自己也是从手忙脚乱时走过来的。 只不过这里先提示一下。在线上应急过程中要记住，只有一个总体目标： 尽快恢复服务，消除影响 。 不管处于应急的哪个阶段，我们首先必须想到的是恢复问题，恢复问题不一定能够定位问题，也不一定有完美的解决方案，也许是通过经验判断，也许是预设开关等，但都可能让我们达到快速恢复的目的，然后 保留部分现场，再去定位问题、解决问题和复盘 。 在大多数情况下，我们都是先优先恢复服务，保留下当时的异常信息（内存dump、线程dump、gc log等等，在紧急情况下甚至可以不用保留，等到事后去复现），等到服务正常，再去复盘问题。 好，现在让我们进入正题吧。 常见现象：CPU 利用率高/飙升 场景预设： 监控系统突然告警，提示服务器负载异常。 预先说明： CPU飙升只是一种现象，其中具体的问题可能有很多种，这里只是借这个现象切入。 注：CPU使用率是衡量系统繁忙程度的重要指标。但是 CPU使用率的安全阈值是相对的，取决于你的系统的IO密集型还是计算密集型 。一般计算密集型应用CPU使用率偏高load偏低，IO密集型相反。 常见原因： 频繁 gc 死循环、线程阻塞、io wait...etc 模拟 这里为了演示

1、java agent是什么？ ---》对用户透明，不侵入用户业务代码。让java虚拟机加载agent jar 2、java agent有什么用？ --->应用场景例如：调用链追踪项目，在用户无感知的情况下，记录日志。目前业内使用该技术的有，SkyWalking,Pinpoint(这个监控的粒度更小) -各个 Java IDE 的调试功能，例如 eclipse、IntelliJ ； -热部署功能，例如 JRebel、XRebel、 spring-loaded； -各种线上诊断工具，例如 Btrace、Greys，还有阿里的 Arthas； -各种性能分析工具，例如 Visual VM、JConsole 等 3、java agent的实现原理? https://zhuanlan.zhihu.com/p/147375268 4、 入门案例 4.1、 如何制造自己第一个java agent jar包 4.1.1、 第一步：我们需要一个插件来帮助我们生成带特定格式的MAINIFEST.MF的jar 4.1.2、 第二步：在启动项目的时候，在jvm参数中添加 -javaagent: *\ving-agent-0.0.1-SNAPSHOT.jar （在jvm上先加载agent包） （偷偷地问）特定格式的MAINIFEST.MF是怎样的？需要包括下面的内容 Manifest-Version:

作者 | Agentd Arthas watch 命令使用指南 Arthas 是我很喜欢的一款 Java 领域的开发调试工具。 每次测试遇到问题的时候，当别人为了加一条日志而重发代码，我都会欣慰地拿出我的 Arthas 并且告诉他们：少年，你不用再为了加日志就重发代码而烦恼了。Arthas，你值得拥有。 这次我要介绍的是我使用最多的一个功能： watch 。Arthas 功能虽多，但我最喜欢的还是这一个。使用 watch 之后，我再也不用为了观察函数调用而加日志了。 Arthas 是什么 Arthas 官网是这么介绍自己的： Arthas 是 Alibaba 开源的 Java 诊断工具，深受开发者喜爱。 当你遇到以下类似问题而束手无策时，Arthas 可以帮助你解决： 这个类从哪个 jar 包加载的？为什么会报各种类相关的 Exception？ 我改的 来源： oschina 链接： https://my.oschina.net/u/4340305/blog/4307418

云栖号资讯：【 点击查看更多行业资讯 】 在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！ 一、入门步骤 1. 安装 上述命令会下载启动脚本文件 as.sh 到当前目录： curl -L https://alibaba.github.io/arthas/install.sh | sh or as.sh 启动： curl -sk https://arthas.gitee.io/arthas-boot.jar -o ~/.arthas-boot.jar && echo "alias as.sh='java -jar ~/.arthas-boot.jar --repo-mirror aliyun --use-http'" >> ~/.bashrc && source ~/.bashrc 2. 在线教程体验 当然也可以自己本地体验一下~自己通过下载一个 arthas-idea-plugin 的体验 demo 直接本地上手。 github.com/WangJi92/ar… 全局命令说明 -x 是展示结果属性遍历深度，默认为 1 -n 是执行的次数 ，q 退出 -c classloader 的hash值 退出 q ，关闭 stop 3. 了解最常用的trace、watch的功能 watch和trace 是arthas 诊断中对于开发人员解决线上的问题最常用的功能！ trace

出处： 利用阿里开源工具进行排查线上CPU居高问题 前言 　　在我们开发过程中，无法避免的会出现所谓的垃圾代码，导致服务器的CPU一直处于100%。但我们应用已经上线，导致服务器CPU居高，但又不知道哪边出现的问题，我们应该怎么去找出哪边的代码出现问题呢？今天老顾就介绍几种工具去快速定位。 演示代码 我们先来编写一下代码，新建springboot的maven项目，创建web服务，引入SpringBoot内置web容器，pom.xml关键引用jar包如下： < dependency > < groupId > org.springframework.boot </ groupId > < artifactId > spring-boot-starter-web </ artifactId > </ dependency > 创建service：TestWhile 创建Controller：TestWhile 配置文件application.properties server.port=80 server.servlet.context-path=/api 打包项目，上传测试服务器 java -jar demo- 0.0 . 1 -SNAPSHOT.jar & 打开浏览器，访问死循环方法 打开浏览器，地址栏输入http://xxxx/api/user/testWhile?size=2

作者 | 于爽 中原银行系统研发工程师，目前在技术平台室中间件小组从事分布式缓存、消息队列等相关工作。 【Arthas 官方社区正在举行征文活动，参加即有奖品拿哦~ 点击投稿 】 Arthas 是一款 Java应用开源诊断工具，由于其强大的问题排查及诊断能力，自其开源以来广受开发者的关注和使用，多次登顶 GitHub Trending，并得到国内多家技术媒体的推荐分享。 一. 定制化功能改造 Arthas 可以通过简单的命令交互模式，接入运行的 JVM，快速定位和诊断线上程序运行问题。在不重启服务的情况下，实时、动态的修改相关 code，并实时生效。具体工作原理如下： 1. 连接JVM：通过attach机制，通过attach pid连接正在运行的JVM； 2. 查看及修改JVM字节码：通过instrument技术对运行中的JVM附加或修改字节 来源： oschina 链接： https://my.oschina.net/u/4402060/blog/4309971

作者 | 徐靖峰 阿里云高级开发工程师 前言 Dubbo 线程池满异常应该是大多数 Dubbo 用户都遇到过的一个问题，本文以 Arthas 3.1.7 版本为例，介绍如何针对该异常进行诊断，主要使用到 dashboard / thread 两个指令。 推荐使用 Arthas 方式一： 推荐使用 IDEA 插件下载 Cloud Toolkit 来使用 Arthas Cloud Toolkit 是阿里云发布的免费本地 IDE 插件，帮助开发者更高效地开发、测试、诊断并部署应用。通过插件，可以将本地应用一键部署到任意服务器，甚至云端（ECS、EDAS、ACK、ACR 和 小程序云等）；并且还内置了 Arthas 诊断、Dubbo工具、Terminal 终端、文件上传、函数计算 和 MySQL 执行器等工具。不仅仅有 IntelliJ IDEA 主流版本，还有 Eclipse、Pycharm、Maven 等其他版本。 方式二： 直接下载 Dubbo 线程池满异常介绍 理解线程池满异常需要首先了解 Dubbo 线程模型，官方文档： http://dubbo.apache.org/zh-cn/docs/user/demos/thread-model.html 。 简单概括下 Dubbo 默认的线程模型：Dubbo 服务端每次接收到一个 Dubbo 请求，便交给一个线程池处理，该线程池默认有

云栖号资讯：【 点击查看更多行业资讯 】 在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！ 最近我们线上有个应用服务器有点上头，CPU总能跑到99%，我寻思着它流量也不大啊，为啥能把自己整这么累？于是我登上这台服务器，看看它到底在干啥！ 以前碰到类似问题，可能会考虑使用 top -Hp 加 jstack 命令去排查，虽然能大致定位到问题范围，但有效信息还是太少了，多数时候还是要靠猜。今天向大家推荐一款更高效更精准的工具：Arthas！Arthas 是 Alibaba 开源的 Java 诊断工具，能够帮助我们快速定位线上问题。基本的安装使用可以参考官方文档： https://alibaba.github.io/arthas 这次我们利用它来排查 CPU 负载高的问题。CPU 负载过高一般是某个或某几个线程有问题，所以我们尝试使用第一个命令：thread，这个命令会显示所有线程的信息，并且把 CPU 使用率高的线程排在前面。 [arthas@384]$ thread Threads Total: 112, NEW: 0, RUNNABLE: 26, BLOCKED: 0, WAITING: 31, TIMED_WAITING: 55, TERMINATED: 0 ID NAME STATE %CPU TIME 108 h..ec-0 RUNNABLE 51 4011:48

最近我们线上有个应用服务器有点上头，CPU 总能跑到 99%，我寻思着它流量也不大啊，为啥能把自己整这么累？于是我登上这台服务器，看看它到底在干啥！ 以前碰到类似问题，可能会考虑使用top -Hp 加 jstack命令去排查，虽然能大致定位到问题范围，但有效信息还是太少了，多数时候还是要靠猜。 申请阿里云服务时，可以使用 2000元阿里云代金券 ，阿里云官网领取网址： https://dashi.aliyun.com/site/yun/youhui 今天向大家推荐一款更高效更精准的工具：Arthas！ Arthas 是 Alibaba 开源的 Java 诊断工具，能够帮助我们快速定位线上问题。基本的安装使用可以参考官方文档： https://alibaba.github.io/arthas 这次我们利用它来排查 CPU 负载高的问题。 CPU 负载过高一般是某个或某几个线程有问题，所以我们尝试使用第一个命令：thread，这个命令会显示所有线程的信息，并且把 CPU 使用率高的线程排在前面。 [arthas@384]$ thread Threads Total: 112, NEW: 0, RUNNABLE: 26, BLOCKED: 0, WAITING: 31, TIMED_WAITING: 55, TERMINATED: 0 ID NAME STATE %CPU TIME