字節碼插樁--你也可以輕松掌握

1 什么是插樁?

聽到關于“插樁”的詞語,第一眼覺得會很高深,那到底什么是插樁呢?用通俗的話來講,插樁就是將一段代碼通過某種策略插入到另一段代碼,或替換另一段代碼。這里的代碼可以分為源碼和字節碼,而我們所說的插樁一般指字節碼插樁。
圖1是Android開發者常見的一張圖,我們編寫的源碼(.java)通過javac編譯成字節碼(.class),然后通過dx/d8編譯成dex文件。


圖1:Java-字節碼-dex,圖片來自-極客時間

我們下面要講的插樁,就是在.class轉為.dex之前,修改.class文件從而達到修改或替換代碼的目的。
那有人肯定會有這樣的疑問?既然插樁是插入或替換代碼,那為何我不自己直接插入或替換呢?為何還要用這么“復雜”的工具?別著急,第二個問題將會給你答案。

2 插樁的應用場景有哪些?

技術是服務于業務的,一個無法推進業務進步的技術并不值得我們學習。在上面,我們對插樁的理解是:插入,替換代碼。那么,結合這個核心主線我們來挖掘插樁能被應用的場景有哪些?

  • 代碼插入

我們所熟悉的ButterKnife,Dagger這些常用的框架,也是在編譯期間生成了代碼,簡化了程序員的操作。假設有這么一個需求,要監控某些或者所有方法的執行耗時?你會怎么做呢?如果你監控的方法只有十幾個或者幾十個,那么也許通過程序員自身的編碼就能輕松解決;但是如果監控的方法達到百千甚至萬級別,你還通過編碼來解決?那么程序員存在的價值在哪里?面對這樣的重復勞動問題,最先想到的就應該是自動化,也就是我們今天所講的插樁。通過插樁,我們掃描每一個class文件,并針對特定規則進行字節碼修改從而達到監控每個方法耗時的目的。關于如何實現這樣的需求,后面我會詳細講述。

  • 代碼替換

如果遇到這么一個需求,需要將項目中所有使用某個方法(如Dialog.show())的地方替換成自己包裝的方法(MyDialog.show()),那么你該如何解決呢?有人會說,直接使用快捷鍵就能全局替換。那么有兩個問題
1 如果有其他類定義了show()方法,并被調用了,直接使用快捷鍵是否會被錯誤替換?
2 如果其他引用包使用了該方法,你怎么替換呢?
沒關系,插樁同樣可以解決你的問題。
綜合上面所說的兩點,其實很多業務場景都使用了插樁技術,比如無痕埋點,性能監控等。

3 掌握插樁應該具備的基礎知識有哪些?

上面講了插樁的應用場景,是否現在想躍躍欲試呢?別著急,想掌握好插樁技術,練就扎實的插樁功底,我們是需要具備一些基礎知識的。

  • 熟練掌握字節碼相關技術。可參考 一文讓你明白Java字節碼

  • Gradle自定義插件,直接參考官網 Writing Custom plugins

  • 如果你想運用在Android項目中,那么還需要掌握Transform API,
    這是android在將class轉成dex之前給我們預留的一個接口,在該接口中我們可以通過插件形式來修改class文件。

  • 字節碼修改工具。如AspectJ,ASM,javasisst。這里我推薦使用ASM,關于ASM相關知識,在下一章我給大家簡單介紹。同樣大家可以參考 Asm官方文檔

  • groovy語言基礎
    如果你具備了上面5塊知識,那么恭喜你,會很順利的完成字節碼插樁技術了。下面,我通過實戰一個很簡單的例子,帶領大家一起領略插樁的風采。

4 使用ASM進行字節碼插樁

1 什么是ASM?

ASM是生成和轉換已編譯的Java類工具,就是我們插樁需要使用的工具。

2 兩種API?

ASM提供了兩種API來生成和轉換已編譯類,一個是核心API,以基于事件形式來表示類;另一個是樹API,以基于對象形式來表示類。

3 基于事件形式

我們通過上面的基礎知識,了解到類的結構,類包含字段,方法,指令等;基于事件的API把類看作是一系列事件來表示,每一個類的事件表示一個類的元素。類似解析XML的SAX

4 基于對象形式

基于對象的API將類表示成一棵對象樹,每個對象表示類的一部分。類似解析XML的DOM

5 優缺點比較

事件形式 對象形式
內存占用
實現難度

通過上面表格,我們清楚的了解到:

  • 事件API內存占用少于對象API,因為事件API不需要在內存中創建和存儲對象樹
  • 事件API實現難度比對象API大,因為事件API在任意時刻類中只有一個元素可使用,但是對象API能獲得整個類。
    那么接下來,我們就通過比較容易實現的對象API入手,一起完成上面的需求。
    我們Android的構建工具是Gradle,因此我們結合transform和Gradle插件方式來完成該需求,接下來我們來看看gradle官方提供的3種插件形式
    6 Gradle插件的3種形式
插件形式 說明
Build script 直接在build script中寫插件代碼,不可復用
buildSrc 獨立項目結構,只能在本構建體系中復用,無法提供給其他項目
Standalone 獨立項目結構,發布到倉庫,可以復用

由于我們是demo,并不需要共享給其他項目,因此采用buildSrc方式即可,但是正常項目中都采用Standalone形式。

5 插樁實踐

目標 : 刪除所有以test開頭的方法

接下來我們來完成一個非常小的需求,刪除所有以test開頭的方法。為什么說這是一個小需求,因為這并不涉及指令的操作,所有操作通過方法名完成即可。通過完成這個demo,只是拋磚引玉。如若后期需要,可以逐步深入到指令級別替換。
接下來的步驟就是創建demo的過程

  • 1 新建buildSrc目錄,用來存放源代碼位置。針對不同語言可以新建不同目錄。


    圖2-項目整體結構

    如上圖所示的是buildSrc的結構。

  • 2 在buildSrc的gradle文件中我們需要配置如下代碼
apply plugin: 'groovy'
dependencies {
   compile gradleApi()//在使用自定義插件時候,一定要引用org.gradle.api.Plugin
   compile 'com.android.tools.build:gradle:3.3.2'//使用自定義transform時候,需要引用com.android.build.api.transform.Transform
   compile 'org.ow2.asm:asm:6.0'
   compile 'commons-io:commons-io:2.6'
}
repositories {
   mavenCentral()
   jcenter()
   google()
}
  • 3 重寫Transform API
    在groovy目錄下新建一個groovy類并繼承Transform,注意導包com.android.build.api.transform,并實現抽象方法和transform方法,如下
class MyTransform extends Transform {
   Project project
   MyTransform(Project project) {
       this.project = project
   }
   @Override
   String getName() {
       return "MyTransform"
   }
   //設置輸入類型,我們是針對class文件處理
   @Override
   Set<QualifiedContent.ContentType> getInputTypes() {
       return TransformManager.CONTENT_CLASS
   }
   //設置輸入范圍,我們選擇整個項目
   @Override
   Set<? super QualifiedContent.Scope> getScopes() {
       return TransformManager.SCOPE_FULL_PROJECT
   }
   @Override
   boolean isIncremental() {
       return true
   }
   //重點就是該方法,我們需要將修改字節碼的邏輯就從這里開始
   @Override
   void transform(Context context, Collection<TransformInput> inputs, Collection<TransformInput> referencedInputs, TransformOutputProvider outputProvider, boolean isIncremental) throws IOException, TransformException, InterruptedException {
       inputs.each {
           TransformInput input ->
               input.getJarInputs().each {
               //處理jar文件,代碼太多,這里暫時不貼
               }
               input.getDirectoryInputs().each {
               //處理目錄文件,這里的ASMHelper.transformClass()是修改字節碼邏輯
                   def destDir = transformInvocation.outputProvider.getContentLocation(
                           "${dir.name}_transformed",
                           dir.contentTypes,
                           dir.scopes,
                           Format.DIRECTORY)
                   if (dir.file) {
                       def modifiedRecord = [:]
                       dir.file.traverse(type: FileType.FILES, nameFilter: ~/.*\.class/) {
                           File classFile ->
                               def className = classFile.absolutePath.replace(dir.getFile().getAbsolutePath(), "")
                               if (!ASMHelper.filter(className)) {
                                   def transformedClass = ASMHelper.transformClass(classFile, dir.file, transformInvocation.context.temporaryDir)
                                   modifiedRecord[(className)] = transformedClass
                               }
                       }
                       FileUtils.copyDirectory(dir.file, destDir)
                       modifiedRecord.each { name, file ->
                           def targetFile = new File(destDir.absolutePath, name)
                           if (targetFile.exists()) {
                               targetFile.delete()
                           }
                           FileUtils.copyFile(file, targetFile)
                       }
                       modifiedRecord.clear()
               }
       }
   }
}
  • 4 實現字節碼修改邏輯
    Transform我們已經定義完成,接下來就要針對讀入的字節碼進行修改。我們采用對象API進行解析class文件。一共就是3個步驟:
    1 將輸入流轉化為ClassNode
    2 處理ClassNode,這里就是我們的業務邏輯所在
    3 將ClassNode轉為字節數組輸出
    當然還有其他文件的IO操作,這里因為篇幅限制未貼出,如若需要demo,可以私信。
static byte[] modifyClass(InputStream inputStream) {
       ClassNode classNode = new ClassNode(Opcodes.ASM5)
       ClassReader classReader = new ClassReader(inputStream)
       //1 將讀入的字節轉為classNode
       classReader.accept(classNode, 0)
       //2 對classNode的處理邏輯
       Iterator<MethodNode> iterator = classNode.methods.iterator();
       while (iterator.hasNext()) {
           MethodNode node = iterator.next()
           if (node.name.startsWith("test")) {
               iterator.remove()
           }
       }
       ClassWriter classWriter = new ClassWriter(0)
       //3  將classNode轉為字節數組
       classNode.accept(classWriter)
       return classWriter.toByteArray()
   }
  • 5 插件化
    上面我們完成了字節碼修改邏輯以及定義Transform,但是并沒有完成插件的定義。結合Transform API我們了解到,需要將我們自定義的Transform注冊到插件中,如下
class MyPlugin implements Plugin<Project> {
    @Override
    void apply(Project project) {
        project.android.registerTransform(new MyTransform(project))
    }
}
  • 6 提供可對外使用的插件
    插件完成了,但是怎么才能對外使用呢?上面我們說到,我們采取3種插件形式之一的buildSrc。我們上文中創建了plugin.properties文件。只需要在該文件中編輯實現類即可
implementation-class=MyPlugin
  • 7 應用方應用插件
    在應用方的gradle文件中做如下配置
apply plugin: 'plugin'

上面代碼我們注意到,plugin這個插件和plugin.properties的文件名是一樣的。是的,應用方應用的插件名和我們定義的properties文件名保持一致。

  • 8 結果展示
    源代碼如下,經過我們插件處理之后,編譯后的字節碼應該沒有了testDemo方法。
public class MainActivity extends Activity {
    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(android.R.layout.activity_list_item);
    }
    public void testDemo() {
        System.out.println("demo test");
    }
}

那么,處理后的字節碼在哪呢?在$project/build/intermediates/transforms/MyTransform/...
MyTransform是我自定義Transform的類名,下面有debug和release包。繼續下去大家應該能找到對應的類。

圖3-結果展示.png

上圖我們看到,已經沒有的testDemo方法。成功!

6 結束語

通過上面實戰練習,相信你已經初步掌握了插樁的基本技術,但是這還遠遠不夠;在項目中會遇到各式各樣的問題,現實情況可能沒有demo這么簡單;不過沒關系,如果在插樁過程中遇到任何問題,都可以私信給我,我將盡我所能的給你提供最優質的免費咨詢服務。同時,我也非常歡迎大家互相交流技術,共同成長。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
禁止轉載,如需轉載請通過簡信或評論聯系作者。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,619評論 6 539
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,155評論 3 425
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 177,635評論 0 382
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,539評論 1 316
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,255評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,646評論 1 326
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,655評論 3 444
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,838評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,399評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,146評論 3 356
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,338評論 1 372
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,893評論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,565評論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,983評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,257評論 1 292
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,059評論 3 397
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,296評論 2 376

推薦閱讀更多精彩內容