1. 程式人生 > >使用java動態位元組碼技術簡單實現arthas的trace功能。

使用java動態位元組碼技術簡單實現arthas的trace功能。

參考資料

ASM 系列詳細教程

編譯時,找不到asm依賴


用過[Arthas]的都知道,Arthas是alibaba開源的一個非常強大的Java診斷工具。

不管是線上還是線下,我們都可以用Arthas分析程式的執行緒狀態、檢視jvm的實時執行狀態、列印方法的出入參和返回型別、收集方法中每個程式碼塊耗時,

甚至可以監控類、方法的呼叫次數、成功次數、失敗次數、平均響應時長、失敗率等。

 

前幾天學習java動態位元組碼技術時,突然想起這款java診斷工具的trace功能:列印方法中每個節點的呼叫耗時。簡簡單單的,正好拿來做動態位元組碼入門學習的demo。

程式結構

src
 ├── agent-package.bat
 ├── java
 │   ├── asm
 │   │   ├── MANIFEST.MF
 │   │   ├── TimerAgent.java
 │   │   ├── TimerAttach.java
 │   │   ├── TimerMethodVisitor.java
 │   │   ├── TimerTrace.java
 │   │   └── TimerTransformer.java
 │   └── demo
 │       ├── MANIFEST.MF
 │       ├── Operator.java
 │       └── Test.java
 ├── run-agent.bat
 ├── target-package.bat
 └── tools.jar

  

編寫目標程式

 程式碼

package com.gravel.demo.test.asm;

/**
 * @Auther: syh
 * @Date: 2020/10/12
 * @Description:
 */
public class Test {
    public static boolean runnable = true;
    public static void main(String[] args) throws Exception {
        while (runnable) {
            test();
        }
    }

    // 目標:分析這個方法中每個節點的耗時
    public static void test() throws Exception {
        Operator.handler();
        long time_wait = (long) ((Math.random() * 1000) + 2000);
        Operator.callback();
        Operator.pause(time_wait);
    }
}

  

Operator.java

/**
 * @Auther: syh
 * @Date: 2020/10/28
 * @Description: 輔助類,同樣可用於分析耗時
 */
public class Operator {

    public static void handler() throws Exception {
        long time_wait = (long) ((Math.random() * 10) + 20);
        sleep(time_wait);
    }

    public static void callback() throws Exception {
        long time_wait = (long) ((Math.random() * 10) + 20);
        sleep(time_wait);
    }

    public static void pause(long time_wait) throws Exception {
        sleep(time_wait);
    }

    public static void stop() throws Exception {
        Test.runnable = false;
        System.out.println("business stopped.");
    }

    private static void sleep(long time_wait) throws Exception {
        Thread.sleep(time_wait);
    }
}

  

MANIFEST.MF

編寫MANIFEST.MF檔案,指定main-class。注意:冒號後面加空格,結尾加兩行空白行。

Manifest-Version: 1.0
Archiver-Version: Plexus Archiver
Built-By: syh
Created-By: Apache Maven
Build-Jdk: 1.8.0_202
Main-Class: com.gravel.demo.test.asm.Target

  

打包

偷懶寫了bat批命令,生成target.jar

@echo off & setlocal
attrib -s -h -r -a /s /d demo
rd /s /q demo
rd /q target.jar
javac -encoding utf-8 -d . ./java/demo/*.java
jar cvfm target.jar ./java/demo/MANIFEST.MF demo
rd /s /q demo
pause
java -jar target.jar

  

java agent探針

instrument 是 JVM 提供的一個可以修改已載入類檔案的類庫。而要實現程式碼的修改,我們需要實現一個 instrument agent。

jdk1.5時,agent有個內定方法premain。是在類載入前修改。所以無法做到修改正在執行的類。
jdk1.6後,agent新增了agentmain方法。agentmain是在虛擬機器啟動以後載入的。所以可以做攔截、熱部署等。

講JAVA探針技術,實際上我自己也是半吊子。所以這裡用的是邊分析別人例子邊摸索的思路來實現我的簡單的trace功能。
例子使用的是ASM位元組碼生成框架

MANIFEST.MF

首先一個可用的jar,關鍵之一是MAINFEST.MF檔案是吧。

Manifest-Version: 1.0
Archiver-Version: Plexus Archiver
Created-By: Apache Maven
Built-By: syh
Build-Jdk: 1.8.0_202
Agent-Class: asm.TimerAgent
Can-Retransform-Classes: true
Can-Redefine-Classes: true
Class-Path: ./tools.jar
Main-Class: asm.TimerAttach

  

我們從MANIFEST.MF中提取幾個關鍵的屬性

屬性
 說明

Agent-Class

agentmain入口類

 

Premain-Class

 

premain入口類,與agent-class至少指定一個。

Can-Retransform-Classes

 

對於已經載入的類重新進行轉換處理,即會觸發重新載入類定義。

 

Can-Redefine-Classes

 

對已經載入的類不做轉換處理,而是直接把處理結果(bytecode)直接給JVM

 

Class-Path

 

asm動態位元組碼技術依賴tools.jar,如果沒有可以從jdk的lib目錄下拷貝。

 

Main-Class

 

這裡並不是agent的關鍵屬性,為了方便,我把載入虛擬機器的程式和agent合併了。

 

程式碼

然後我們來看看兩個入口類,首先分析一個可執行jar的入口類Main-Class。

public class TimerAttach {

    public static void main(String[] args) throws Exception {
        /**
         * 啟動jar時,需要指定兩個引數:1目標程式的pid。 2 要修改的類路徑及方法,格式 package.class#methodName
         */
        if (args.length < 2) {
            System.out.println("pid and class must be specify.");
            return;
        }

        if (!args[1].contains("#")) {
            System.out.println("methodName must be specify.");
            return;
        }

        VirtualMachine vm = VirtualMachine.attach(args[0]);
        // 這裡為了方便我把 vm和agent整合在一個jar裡面了, args[1]就是agentmain的入參。
        vm.loadAgent("agent.jar", args[1]);
    }
}

  

程式碼很簡單,1:args入參校驗;2:載入目標程序pid(args[0]);3:載入agent jar包(因為合併了,所以這個jar其實就是自己)。

其中vm.loadAgent(agent.jar, args[1])會呼叫agent-class中的agentmain方法,而args[1]就是agentmain的第一個入參。

public class TimerAgent {
    public static void agentmain(String agentArgs, Instrumentation inst) {
        String[] ownerAndMethod = agentArgs.split("#");
        inst.addTransformer(new TimerTransformer(ownerAndMethod[1]), true);
        try {
            inst.retransformClasses(Class.forName(ownerAndMethod[0]));
            System.out.println("agent load done.");
        } catch (Exception e) {
            e.printStackTrace();
            System.out.println("agent load failed!");
        }
    }
}

  

在 agentmain 方法裡,我們呼叫retransformClassess方法載入目標類,呼叫addTransformer方法載入TimerTransformer類實現對目標類的重新定義。

類轉換器

public class TimerTransformer implements ClassFileTransformer {
    private String methodName;

    public TimerTransformer(String methodName) {
        this.methodName = methodName;
    }

    @Override
    public byte[] transform(ClassLoader loader, String className, Class<?> classBeingRedefined, ProtectionDomain protectionDomain, byte[] classFileBuffer) {
        ClassReader reader = new ClassReader(classFileBuffer);
        ClassWriter classWriter = new ClassWriter(ClassWriter.COMPUTE_MAXS);
        ClassVisitor classVisitor = new TimerTrace(Opcodes.ASM5, classWriter, methodName);
        reader.accept(classVisitor, ClassReader.EXPAND_FRAMES);
        return classWriter.toByteArray();
    }
}

  

對被匹配到的類中的方法進行修改

public class TimerTrace extends ClassVisitor implements Opcodes {
    private String owner;
    private boolean isInterface;
    private String methodName;

    public TimerTrace(int i, ClassVisitor classVisitor, String methodName) {
        super(i, classVisitor);
        this.methodName = methodName;
    }

    @Override
    public void visit(int version, int access, String name, String signature, String superName, String[] interfaces) {
        super.visit(version, access, name, signature, superName, interfaces);
        owner = name;
        isInterface = (access & ACC_INTERFACE) != 0;
    }

    @Override
    public MethodVisitor visitMethod(int access, String name, String descriptor, String signature,
                                     String[] exceptions) {
        MethodVisitor mv = super.visitMethod(access, name, descriptor, signature, exceptions);
        // 匹配到指定methodName時,進行位元組碼修改
        if (!isInterface && mv != null && name.equals(methodName)) {

            // System.out.println("    package.className:methodName()")
            mv.visitFieldInsn(GETSTATIC, "java/lang/System", "out", "Ljava/io/PrintStream;");

            mv.visitTypeInsn(NEW, "java/lang/StringBuilder");
            mv.visitInsn(DUP);
            mv.visitMethodInsn(INVOKESPECIAL, "java/lang/StringBuilder", "<init>", "()V", false);

            mv.visitLdcInsn("    " + owner.replace("/", ".")
                    + ":" + methodName + "() ");
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "append",
                    "(Ljava/lang/String;)Ljava/lang/StringBuilder;", false);

            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "toString", "()Ljava/lang/String;", false);

            mv.visitMethodInsn(INVOKEVIRTUAL, "java/io/PrintStream", "println", "(Ljava/lang/String;)V", false);

            // 方法程式碼塊耗時統計並列印
            TimerMethodVisitor at = new TimerMethodVisitor(owner, access, name, descriptor, mv);
            return at.getLocalVariablesSorter();
        }
        return mv;
    }

    public static void main(String[] args) throws IOException {
        ClassWriter cw = new ClassWriter(ClassWriter.COMPUTE_MAXS);
        TraceClassVisitor tv = new TraceClassVisitor(cw, new PrintWriter(System.out));
        TimerTrace addFiled = new TimerTrace(Opcodes.ASM5, tv, "test");
        ClassReader classReader = new ClassReader("demo.Test");
        classReader.accept(addFiled, ClassReader.EXPAND_FRAMES);

        File file = new File("out/production/asm-demo/demo/Test.class");
        String parent = file.getParent();
        File parent1 = new File(parent);
        parent1.mkdirs();
        file.createNewFile();
        FileOutputStream fileOutputStream = new FileOutputStream(file);
        fileOutputStream.write(cw.toByteArray());
    }
}

  

要統計方法中每行程式碼耗時,只需要在每一行程式碼的前後加上當前時間戳然後相減即可。

所以我們的程式碼是這麼寫的。

public class TimerMethodVisitor extends MethodVisitor implements Opcodes {
    private int start;
    private int end;
    private int maxStack;
    private String lineContent;
    public boolean instance = false;
    private LocalVariablesSorter localVariablesSorter;
    private AnalyzerAdapter analyzerAdapter;

    public TimerMethodVisitor(String owner, int access, String name, String descriptor, MethodVisitor methodVisitor) {
        super(Opcodes.ASM5, methodVisitor);
        this.analyzerAdapter = new AnalyzerAdapter(owner, access, name, descriptor, this);
        localVariablesSorter = new LocalVariablesSorter(access, descriptor, this.analyzerAdapter);
    }

    public LocalVariablesSorter getLocalVariablesSorter() {
        return localVariablesSorter;
    }

    /**
     * 進入方法後,最先執行
     * 所以我們可以在這裡定義一個最開始的時間戳, 然後建立一個區域性變數var_end
     * Long var_start = System.nanoTime();
     * Long var_end;
     */
    @Override
    public void visitCode() {
        mv.visitCode();
        mv.visitMethodInsn(INVOKESTATIC, "java/lang/System", "nanoTime", "()J", false);
        mv.visitMethodInsn(INVOKESTATIC, "java/lang/Long", "valueOf", "(J)Ljava/lang/Long;", false);
        start = localVariablesSorter.newLocal(Type.LONG_TYPE);
        mv.visitVarInsn(ASTORE, start);


        end = localVariablesSorter.newLocal(Type.LONG_TYPE);

        maxStack = 4;
    }

    /**
     * 在每行程式碼後面增加以下程式碼
     * var_end = System.nanoTime();
     * System.out.println("[" + String.valueOf((var_end.doubleValue() - var_start.doubleValue()) / 1000000.0D) + "ms] " + "package.className:methodName() #lineNumber");
     * var_start = var_end;
     * @param lineNumber
     * @param label
     */
    @Override
    public void visitLineNumber(int lineNumber, Label label) {
        super.visitLineNumber(lineNumber, label);
        if (instance) {
            mv.visitMethodInsn(INVOKESTATIC, "java/lang/System", "nanoTime", "()J", false);
            mv.visitMethodInsn(INVOKESTATIC, "java/lang/Long", "valueOf", "(J)Ljava/lang/Long;", false);
            mv.visitVarInsn(ASTORE, end);

            // System.out
            mv.visitFieldInsn(GETSTATIC, "java/lang/System", "out", "Ljava/io/PrintStream;");

            // new StringBuilder();
            mv.visitTypeInsn(NEW, "java/lang/StringBuilder");
            mv.visitInsn(DUP);
            mv.visitMethodInsn(INVOKESPECIAL, "java/lang/StringBuilder", "<init>", "()V", false);

            mv.visitLdcInsn("        -[");
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "append",
                    "(Ljava/lang/String;)Ljava/lang/StringBuilder;", false);

            mv.visitVarInsn(ALOAD, end);
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/Long", "doubleValue", "()D", false);
            mv.visitVarInsn(ALOAD, start);
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/Long", "doubleValue", "()D", false);
            mv.visitInsn(DSUB);
            mv.visitLdcInsn(new Double(1000 * 1000));
            mv.visitInsn(DDIV);
            // String.valueOf((end - start)/1000000)
            mv.visitMethodInsn(INVOKESTATIC, "java/lang/String", "valueOf", "(D)Ljava/lang/String;", false);
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "append",
                    "(Ljava/lang/String;)Ljava/lang/StringBuilder;", false);

            mv.visitLdcInsn("ms] ");
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "append",
                    "(Ljava/lang/String;)Ljava/lang/StringBuilder;", false);

            // .append("owner:methodName() #line")
            mv.visitLdcInsn(this.lineContent + "#" + lineNumber);
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "append",
                    "(Ljava/lang/String;)Ljava/lang/StringBuilder;", false);

            // stringBuilder.toString()
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/lang/StringBuilder", "toString", "()Ljava/lang/String;", false);

            // println stringBuilder.toString()
            mv.visitMethodInsn(INVOKEVIRTUAL, "java/io/PrintStream", "println", "(Ljava/lang/String;)V", false);

            // start = end
            mv.visitVarInsn(ALOAD, end);
            mv.visitVarInsn(ASTORE, start);

            maxStack = Math.max(analyzerAdapter.stack.size() + 4, maxStack);
        }
        instance = true;
    }

    /**
     * 拼接位元組碼內容
     * @param opcode
     * @param owner
     * @param methodName
     * @param descriptor
     * @param isInterface
     */
    @Override
    public void visitMethodInsn(int opcode, String owner, String methodName, String descriptor, boolean isInterface) {
        super.visitMethodInsn(opcode, owner, methodName, descriptor, isInterface);
        if (!isInterface && opcode == Opcodes.INVOKESTATIC) {
            this.lineContent = owner.replace("/", ".")
                    + ":" + methodName + "() ";
        }
    }

    @Override
    public void visitMaxs(int maxStack, int maxLocals) {
        super.visitMaxs(Math.max(maxStack, this.maxStack), maxLocals);
    }
}

  

如果初學者不會改位元組碼。可以利用idea自帶的asm外掛做參考。

 

打包

這樣,一個可執行的agent jar就寫完了,然後打包

@echo off
attrib -s -h -r -a /s /d asm
rd /s /q asm
rd /q agent.jar
javac -XDignore.symbol.file=true -encoding utf-8 -d . ./java/asm/*.java
jar cvfm agent.jar ./java/asm/MANIFEST.MF asm
rd /s /q asm
exit

  

測試

執行目標程式 target.jar

java -jar target.jar

  

列印Test.test中每個節點耗時

java -jar agent.jar [pid] demo.Test#test

  

結果

 

列印Operator.handler方法每個節點耗時

相關推薦

使用java動態位元組技術簡單實現arthas的trace功能

參考資料 ASM 系列詳細教程 編譯時,找不到asm依賴 用過[Arthas]的都知道,Arthas是alibaba開源的一個非常強大的Java診斷工具。 不管是線上還是線下,我們都可以用Arthas分析程式的執行緒狀態、檢視jvm的實時執行狀態、列印方法的出入參和返回型別、收集方法中每個程式碼塊耗時, 甚至

ASM的一個例子(動態位元組生成) (Java高階程式設計(J2SE綜合))

導讀: 用ASM寫的Hello World。在網上搜索ASM有關的文章,最後居然又找回Matrix。。汗ASM2.0位元組碼框架介紹http://www.matrix.org.cn/resource/article/2006-02-20/ASM+Bytecode+Framew

java識別驗證-用tess4j實現簡單呼叫tessreact-ocr來破解驗證

直接上操作, 因為tess4j依賴jna,而新版的tess4j和預設的com.sun.jna 3.0.6版本不相容,它需要先加入這個jna的依賴: <dependency> <groupId>net.java.dev.jna</gr

PHP分頁初探 一個最簡單的PHP分頁代簡單實現

too 查詢 use img 多少 contain 網站 實現 ice PHP分頁代碼在各種程序開發中都是必須要用到的,在網站開發中更是必選的一項。 要想寫出分頁代碼,首先你要理解SQL查詢語句:select * from goods limit 2,7。PHP分頁代碼核心

淺析java反射(位元組檔案)

什麼是反射? 先談談java程式的執行步驟吧! 先編譯後執行對嗎? 其實你想一想, 你寫的java程式碼機器真的能認識嗎? 早在以前就聽過了吧機器是隻認識0和1的 所以編譯這一階段也就是將java檔案編譯成位元組碼檔案也就是.class檔案 也就是01碼 那什麼又是反射呢?

Intellij idea快速檢視Java位元組(轉載)

原文地址 最近在研究JVM類載入、JVM位元組碼相關的東西,需要經常檢視位元組碼。之前都是用一些外部工具例如bytecoder、JD或者直接cmd使用javap的方式檢視位元組碼。但是使用起來比較麻煩,畢竟不如直接在IDE中直接檢視方便。於是在網上搜索,Intellij idea是否支援檢視位元

二維簡單實現(Zxing)

二維碼的簡單實現(ZXing) 繼續之前的二維碼實現方式的第二種: 先補一下這兩者的區別 1.zxing支援更多的碼制:datamatix、PDF417、等,zbar不能很好支援PDF417(但是在原始碼中有對於Pdf417碼處理)。 2.zxing的執行解碼效率低於zbar,

二維簡單實現(Zbar)

二維碼的實現(Zbar) 我這裡推薦一個二維碼掃描的開源框架——BGAQRCode-Android   QRCode 掃描二維碼、掃描條形碼、相簿獲取圖片後識別、生成帶 Logo 二維碼、支援微博微信、QQ 二維碼掃描樣式。他把Zbar和Zxing,都做了優化,掃描速度非常快,使用者體驗

Java——多執行緒的簡單實現

中高階架構師的必經之路: 高可用、高併發、高效能網站開發 多執行緒基本概念: 多個程序同時進 執行緒:排程和執行的單位(cpu的排程) 程序:作為資源分配的單位(作業系統的分配) 執行緒是程序的一部分 使用者執行緒和守護執行緒 使用者執行緒

Java動態代理模式理解和實現

在研究了靜態代理模式之後,參照網上的許多部落格,便了解到了關於許多靜態代理的不足之處,當業務邏輯趨於複雜時,需要進行代理的內容增加,就會導致程式碼量急劇增加(當然了,現在沒有遇到過這個情況,也就先跟著道聽途說吧)。於是,為了將編寫程式碼的效率提高,可讀性提

Intellij idea快速檢視Java位元組

最近在研究JVM類載入、JVM位元組碼相關的東西,需要經常檢視位元組碼。之前都是用一些外部工具例如bytecoder、JD或者直接cmd使用javap的方式檢視位元組碼。但是使用起來比較麻煩,畢竟不如直接在IDE中直接檢視方便。於是在網上搜索,Intellij idea是否支援檢視位元組碼。看到Stac

Java 多叉樹的簡單實現

Node實體: package com.javatest.NodeA; import java.io.Serializable; import java.util.ArrayList; import

Java動態代理的兩種實現方法

AOP的攔截功能是由java中的動態代理來實現的。說白了,就是在目標類的基礎上增加切面邏輯,生成增強的目標類(該切面邏輯或者在目標類函式執行之前,或者目標類函式執行之後,或者在目標類函式丟擲異常時候執行。不同的切入時機對應不同的Interceptor的種類,如BeforeAd

Java IO位元組流操作及實現記事本Application小程式

JFrame方面的就不做介紹了,下面介紹IO流的知識 程式中主要使用了java IO 中的兩個類: 兩個位元組流操作的類 位元組流的寫:FileOutputStream 繼承OutputStream 從位元組流讀資料:FileInputStream 繼承 InputStre

java之斷點續傳簡單實現

斷點續傳主要是使用http協議中range的屬性來取得資源的部分內容,由於一般服務是不對外直接提供url訪問的,一般都是通過id,在servlet中輸出byte[]來實現,所以要想實現斷點續傳一般要自己實現服務端和客戶端,客戶端保持檔案的下載或上傳狀態,(儲存在本地或者資料

java之執行緒池簡單實現

以前做的東西,實現一個簡單的多執行緒機制,開始之前,現說說原理性的東西吧,下面是我在ibm開發者上搜到的內容 執行緒池的技術背景   在面向物件程式設計中,建立和銷燬物件是很費時間的,因為建立一個物件要獲取記憶體資源或者其它更多資源。在Java中更是如此,虛擬機器將

Jquery掃描二維簡單實現

二維碼:利用圖形模擬二進位制0、1的概念,達到儲存少量資料的功能,一般移動端瀏覽器解析出二維碼裡面隱藏的url資料會自動進行跳轉,常見的支付寶、微信掃描登陸就是利用該原理 Jquery二維碼

java學生管理系統介面簡單實現

學生管理系統簡單的實現,供初學Java Swing同學學習使用。 import java.awt.Dimension; import java.awt.Toolkit; import java.awt.event.ActionEvent; import j

登入 簡單實現

簡單原理是 伺服器生成唯一的 key  附帶到login 上使用者掃描 二維碼 並且訪問伺服器 伺服器反饋登入  狀態前端 頁面 每隔一段時間掃描 伺服器 當前的key是否掃描, 然後後續操作程式碼:package main import ( "fmt" "io" "

Java自動過期本地快取簡單實現

實際專案中常常需要用到本地快取,特別是一些固定不變的資料,不想頻繁調介面,因為http請求本身需要耗時,下面幾個類對本地快取作了簡單實現,支援自動過期功能LocalCache.javainterface LocalCache { public void refresh()