基于SPI的增強(qiáng)式插件框架設(shè)計(jì)
很久之前,為了診斷線上的問題,就想要是能有工具可以在線上出問題的時(shí)候,放個(gè)診斷包進(jìn)去馬上生效,就能看到線上問題的所在,那該是多么舒服的事情。后來慢慢的切換到j(luò)ava領(lǐng)域后,這種理想也變成了現(xiàn)實(shí),小如IDEA中更改頁面就能馬上生效,大如利用Althas工具進(jìn)行線上數(shù)據(jù)診斷,可謂是信手拈來,極大的方便了開發(fā)和診斷。后來深入研究之后,就慢慢的不滿足框架本身帶來的便利了,造輪子的想法慢慢在腦中揮之不去,這也是本文產(chǎn)生的原因了。接下來,你無需準(zhǔn)備任何前置知識(shí),因?yàn)槲乙呀?jīng)為你準(zhǔn)備好了ClassLoader甜點(diǎn),Javassist配菜,JavaAgent高湯,手寫插件加載器框架主食,外加SPI知識(shí)做調(diào)料,且讓我們整理餐具,開始這一道頗有點(diǎn)特色的吃播旅程吧。
雙親委派模型
開始前,讓我們先聊聊雙親委派這個(gè)話題,因?yàn)闊o論是做熱部署,還是做字節(jié)碼增強(qiáng),甚至于日常的編碼,這都是繞不開的一個(gè)話題。先看如下圖示:
從如上圖示,我們可以看到雙親委派模型整體的工作方式,整體講解如下:
類加載器的findClass(loadClass)被調(diào)用
- 進(jìn)入App ClassLoader中,先檢查緩存中是否存在,如果存在,則直接返回
- 步驟2中的緩存中不存在,則被代理到父加載器,即Extension ClassLoader
- 檢查Extension ClassLoader緩存中是否存在
- 步驟4中的緩存中不存在,則被代理到父加載器,即Bootstrap ClassLoader
- 檢查Bootstrap ClassLoader緩存中是否存在
- 步驟6中的緩存中不存在,則從Bootstrap ClassLoader的類搜索路徑下的文件中尋找,一般為rt.jar等,如果找不到,則拋出ClassNotFound Exception
- Extension ClassLoader會(huì)捕捉ClassNotFound錯(cuò)誤,然后從Extension ClassLoader的類搜索路徑下的文件中尋找,一般為環(huán)境變量$JRE_HOME/lib/ext路徑下,如果也找不到,則拋出ClassNotFound Exception
- App ClassLoader會(huì)捕捉ClassNotFound錯(cuò)誤,然后從App ClassLoader的類搜索路徑下的文件中尋找,一般為環(huán)境變量$CLASSPATH路徑下,如果找到,則將其讀入字節(jié)數(shù)組,如果也找不到,則拋出ClassNotFound Exception。如果找到,則App ClassLoader調(diào)用defineClass()方法。
通過上面的整體流程描述,是不是感覺雙親委派機(jī)制也不是那么難理解。本質(zhì)就是先查緩存,緩存中沒有就委托給父加載器查詢緩存,直至查到Bootstrap加載器,如果Bootstrap加載器在緩存中也找不到,就拋錯(cuò),然后這個(gè)錯(cuò)誤再被一層層的捕捉,捕捉到錯(cuò)誤后就查自己的類搜索路徑,然后層層處理。
自定義ClassLoader
了解了雙親委派機(jī)制后,那么如果要實(shí)現(xiàn)類的熱更換或者是jar的熱部署,就不得不涉及到自定義ClassLoader了,實(shí)際上其本質(zhì)依舊是利用ClassLoader的這種雙親委派機(jī)制來進(jìn)行操作的。遵循上面的流程,我們很容易的來實(shí)現(xiàn)利用自定義的ClassLoader來實(shí)現(xiàn)類的熱交換功能:
public class CustomClassLoader extends ClassLoader {
//需要該類加載器直接加載的類文件的基目錄
private String baseDir;
public CustomClassLoader(String baseDir, String[] classes) throws IOException {
super();
this.baseDir = baseDir;
loadClassByMe(classes);
}
private void loadClassByMe(String[] classes) throws IOException {
for (int i = 0; i < classes.length; i++) {
findClass(classes[i]);
}
}
/**
* 重寫findclass方法
*
* 在ClassLoader中,loadClass方法先從緩存中找,緩存中沒有,會(huì)代理給父類查找,如果父類中也找不到,就會(huì)調(diào)用此用戶實(shí)現(xiàn)的findClass方法
*
* @param name
* @return
*/
@Override
protected Class findClass(String name) {
Class clazz = null;
StringBuffer stringBuffer = new StringBuffer(baseDir);
String className = name.replace('.', File.separatorChar) + ".class";
stringBuffer.append(File.separator + className);
File classF = new File(stringBuffer.toString());
try {
clazz = instantiateClass(name, new FileInputStream(classF), classF.length());
} catch (IOException e) {
e.printStackTrace();
}
return clazz;
}
private Class instantiateClass(String name, InputStream fin, long len) throws IOException {
byte[] raw = new byte[(int) len];
fin.read(raw);
fin.close();
return defineClass(name, raw, 0, raw.length);
}
}
這里需要注意的是,在自定義的類加載器中,我們可以覆寫findClass,然后利用defineClass加載類并返回。
上面這段代碼,我們就實(shí)現(xiàn)了一個(gè)最簡(jiǎn)單的自定義類加載器,但是能映射出雙親委派模型呢?
首先點(diǎn)開ClassLoader類,在里面翻到這個(gè)方法:
protected Class<?> loadClass(String name, boolean resolve) throws ClassNotFoundException
{
synchronized (getClassLoadingLock(name)) {
// First, check if the class has already been loaded
Class<?> c = findLoadedClass(name);
if (c == null) {
long t0 = System.nanoTime();
try {
if (parent != null) {
c = parent.loadClass(name, false);
} else {
c = findBootstrapClassOrNull(name);
}
} catch (ClassNotFoundException e) {
// ClassNotFoundException thrown if class not found
// from the non-null parent class loader
}
if (c == null) {
// If still not found, then invoke findClass in order
// to find the class.
long t1 = System.nanoTime();
c = findClass(name);
// this is the defining class loader; record the stats
sun.misc.PerfCounter.getParentDelegationTime().addTime(t1 - t0);
sun.misc.PerfCounter.getFindClassTime().addElapsedTimeFrom(t1);
sun.misc.PerfCounter.getFindClasses().increment();
}
}
if (resolve) {
resolveClass(c);
}
return c;
}
}
如果對(duì)比著雙親委派模型來看,則loadClass方法對(duì)應(yīng)之前提到的步驟1-8,點(diǎn)進(jìn)去findLoadedClass方法,可以看到底層實(shí)現(xiàn)是native的native final Class<?> findLoadedClass0 方法,這個(gè)方法會(huì)從JVM緩存中進(jìn)行數(shù)據(jù)查找。后面的分析方法類似。
而自定義類加載器中的findClass方法,則對(duì)應(yīng)步驟9:
clazz = instantiateClass(name, new FileInputStream(classF), classF.length());
//省略部分邏輯
return defineClass(name, raw, 0, raw.length);
看看,整體是不是很清晰?
自定義類加載器實(shí)現(xiàn)類的熱交換
寫完自定義類加載器,來看看具體的用法吧,我們創(chuàng)建一個(gè)類,擁有如下內(nèi)容:
package com.tw.client;
public class Foo {
public Foo() {
}
public void sayHello() {
System.out.println("hello world22222! (version 11)");
}
}
顧名思義,此類只要調(diào)用sayHello方法,便會(huì)打印出hello world22222! (version 11)出來。
熱交換處理過程如下:
public static void main(String[] args) throws Exception {
while (true) {
run();
Thread.sleep(1000);
}
}
/**
* ClassLoader用來加載class類文件的,實(shí)現(xiàn)類的熱替換
* 注意,需要在swap目錄下,一層層建立目錄com/tw/client/,然后將Foo.class放進(jìn)去
* @throws Exception
*/
public static void run() throws Exception {
CustomClassLoader customClassLoader = new CustomClassLoader("swap", new String[]{"com.tw.client.Foo"});
Class clazz = customClassLoader.loadClass("com.tw.client.Foo");
Object foo = clazz.newInstance();
Method method = foo.getClass().getMethod("sayHello", new Class[]{});
method.invoke(foo, new Object[]{});
}
當(dāng)我們運(yùn)行起來后,我們會(huì)將提前準(zhǔn)備好的另一個(gè)Foo.class來替換當(dāng)前這個(gè),來看看結(jié)果吧(直接將新的Foo.class類拷貝過去覆蓋即可):
hello world22222! (version 11)
hello world22222! (version 11)
hello world22222! (version 11)
hello world22222! (version 11)
hello world22222! (version 11)
hello world2222! (version 2)
hello world2222! (version 2)
hello world2222! (version 2)
hello world2222! (version 2)
可以看到,當(dāng)我們替換掉原來運(yùn)行的類的時(shí)候,輸出也就變了,變成了新類的輸出結(jié)果。整體類的熱交換成功。
不知道我們注意到一個(gè)細(xì)節(jié)沒有,在上述代碼中,我們先創(chuàng)建出Object的類對(duì)象,然后利用Method.invoke方法來調(diào)用類:
有人在這里會(huì)疑惑,為啥不直接轉(zhuǎn)換為Foo類,然后調(diào)用類的Foo.sayHello方法呢?像下面這種方式:
Foo foo2 = (Foo) clazz.newInstance();
foo2.sayHello();
這種方式是不行的,但是大家知道為啥不行嗎?
我們知道,我們寫的類,一般都是被AppClassloader加載的,也就是說,你寫在main啟動(dòng)類中的所有類,只要你寫出來,那么就會(huì)被AppClassloader加載,所以,如果這里我們強(qiáng)轉(zhuǎn)為Foo類型,那鐵定是會(huì)被AppClassloader加載的,但是由于我們的clazz對(duì)象是由CustomerClassloader加載的,所以這里就會(huì)出現(xiàn)這樣的錯(cuò)誤:
java.lang.ClassCastException: com.tw.client.Foo cannot be cast to com.tw.client.Foo
那有什么方法可以解決這個(gè)問題嗎?其實(shí)是有的,就是對(duì)Foo對(duì)象抽象出一個(gè)Interface,比如說IFoo,然后轉(zhuǎn)換的時(shí)候,轉(zhuǎn)換成接口,就不會(huì)有這種問題了:
IFoo foo2 = (IFoo) clazz.newInstance();
foo2.sayHello();
通過接口這種方式,我們就很容易對(duì)運(yùn)行中的組件進(jìn)行類的熱交換了,屬實(shí)方便。
需要注意的是,主線程的類加載器,一般都是AppClassLoader,但是當(dāng)我們創(chuàng)建出子線程后,其類加載器都會(huì)繼承自其創(chuàng)建者的類加載器,但是在某些業(yè)務(wù)中,我想在子線程中使用自己的類加載器,有什么辦法嗎?其實(shí)這里也就是打斷雙親委派機(jī)制。
由于Thread對(duì)象中已經(jīng)附帶了ContextClassLoader屬性,所以這里我們可以很方便的進(jìn)行設(shè)置和獲取:
//設(shè)置操作
Thread t = Thread.currentThread();
t.setContextClassLoader(loader);
//獲取操作
Thread t = Thread.currentThread();
ClassLoader loader = t.getContextClassLoader();
Class<?> cl = loader.loadClass(className);
SPI實(shí)現(xiàn)類的熱交換
說完基于自定義ClassLoader來進(jìn)行類的熱交換后,我們?cè)賮碚f說Java中的SPI。說到SPI相信大家都聽過,因?yàn)樵趈ava中天生集成,其內(nèi)部機(jī)制也是利用了自定義的類加載器,然后進(jìn)行了良好的封裝暴露給用戶,具體的源碼大家可以自定翻閱ServiceLoader類。
這里我們寫個(gè)簡(jiǎn)單的例子:
public interface HelloService {
void sayHello(String name);
}
public class HelloServiceProvider implements HelloService {
@Override
public void sayHello(String name) {
System.out.println("Hello " + name);
}
}
public class NameServiceProvider implements HelloService{
@Override
public void sayHello(String name) {
System.out.println("Hi, your name is " + name);
}
}
然后我們基于接口的包名+類名作為路徑,創(chuàng)建出com.tinywhale.deploy.spi.HelloService文件到resources中的META-INF.services文件夾,里面放入如下內(nèi)容:
com.tinywhale.deploy.spi.HelloServiceProvider
com.tinywhale.deploy.spi.NameServiceProvider
然后在啟動(dòng)類中運(yùn)行:
public static void main(String...args) throws Exception {
while(true) {
run();
Thread.sleep(1000);
}
}
private static void run(){
ServiceLoader<HelloService> serviceLoader = ServiceLoader.load(HelloService.class);
for (HelloService helloWorldService : serviceLoader) {
helloWorldService.sayHello("myname");
}
}
可以看到,在啟動(dòng)類中,我們利用ServiceLoader類來遍歷META-INF.services文件夾下面的provider,然后執(zhí)行,則輸出結(jié)果為兩個(gè)類的輸出結(jié)果。之后在執(zhí)行過程中,我們?nèi)arget文件夾中,將com.tinywhale.deploy.spi.HelloService文件中的NameServiceProvider注釋掉,然后保存,就可以看到只有一個(gè)類的輸出結(jié)果了。
Hello myname
Hi, your name is myname
Hello myname
Hi, your name is myname
Hello myname
Hi, your name is myname
Hello myname
Hello myname
Hello myname
Hello myname
這種基于SPI類的熱交換,比自己自定義加載器更加簡(jiǎn)便,推薦使用。
自定義類加載器實(shí)現(xiàn)Jar部署
上面講解的內(nèi)容,一般是類的熱交換,但是如果我們需要對(duì)整個(gè)jar包進(jìn)行熱部署,該怎么做呢?雖然現(xiàn)在有很成熟的技術(shù),比如OSGI等,但是這里我將從原理層面來講解如何對(duì)Jar包進(jìn)行熱部署操作。
由于內(nèi)置的URLClassLoader本身可以對(duì)jar進(jìn)行操作,所以我們只需要自定義一個(gè)基于URLClassLoader的類加載器即可:
public class BizClassLoader extends URLClassLoader {
public BizClassLoader(URL[] urls) {
super(urls);
}
}
注意,我們打的jar包,最好打成fat jar,這樣處理起來方便,不至于少打東西:
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-shade-plugin</artifactId>
<version>2.4.3</version>
<configuration>
<!-- 自動(dòng)將所有不使用的類排除-->
<minimizeJar>true</minimizeJar>
</configuration>
<executions>
<execution>
<phase>package</phase>
<goals>
<goal>shade</goal>
</goals>
<configuration>
<shadedArtifactAttached>true</shadedArtifactAttached>
<shadedClassifierName>biz</shadedClassifierName>
</configuration>
</execution>
</executions>
</plugin>
之后,我們就可以使用了:
public static void main(String... args) throws Exception {
while (true) {
loadJarFile();
Thread.sleep(1000);
}
}
/**
* URLClassLoader 用來加載Jar文件, 直接放在swap目錄下即可
*
* 動(dòng)態(tài)改變jar中類,可以實(shí)現(xiàn)熱加載
*
* @throws Exception
*/
public static void loadJarFile() throws Exception {
File moduleFile = new File("swap\\tinywhale-client-0.0.1-SNAPSHOT-biz.jar");
URL moduleURL = moduleFile.toURI().toURL();
URL[] urls = new URL[] { moduleURL };
BizClassLoader bizClassLoader = new BizClassLoader(urls);
Class clazz = bizClassLoader.loadClass("com.tw.client.Bar");
Object foo = clazz.newInstance();
Method method = foo.getClass().getMethod("sayBar", new Class[]{});
method.invoke(foo, new Object[]{});
bizClassLoader.close();
}
啟動(dòng)起來,看下輸出,之后用一個(gè)新的jar覆蓋掉,來看看結(jié)果吧:
I am bar, Foo's sister, can you catch me ?????????????
I am bar, Foo's sister, can you catch me ?????????????
I am bar, Foo's sister, can you catch me !?。?!
I am bar, Foo's sister, can you catch me ?。。?!
I am bar, Foo's sister, can you catch me ?。。?!
I am bar, Foo's sister, can you catch me ?。。?!
可以看到,jar包被自動(dòng)替換了。當(dāng)然,如果想卸載此包,我們可以調(diào)用如下語句進(jìn)行卸載:
bizClassLoader.close();
需要注意的是,jar包中不應(yīng)有長(zhǎng)時(shí)間運(yùn)行的任務(wù)或者子線程等,因?yàn)檎{(diào)用類加載器的close方法后,會(huì)釋放一些資源,但是長(zhǎng)時(shí)間運(yùn)行的任務(wù)并不會(huì)終止。所以這種情況下,如果你卸載了舊包,然后馬上加載新包,且包中有長(zhǎng)時(shí)間的任務(wù),請(qǐng)確認(rèn)做好業(yè)務(wù)防重,否則會(huì)引發(fā)不可知的業(yè)務(wù)問題。
由于Spring中已經(jīng)有對(duì)jar包進(jìn)行操作的類,我們可以配合上自己的annotation實(shí)現(xiàn)特定的功能,比如擴(kuò)展點(diǎn)實(shí)現(xiàn),插件實(shí)現(xiàn),服務(wù)檢測(cè)等等等等,用途非常廣泛,大家可以自行發(fā)掘。
上面講解的基本是原理部分,由于目前市面上有很多成熟的組件,比如OSGI等,已經(jīng)實(shí)現(xiàn)了熱部署熱交換等的功能,所以很推薦大家去用一用。
說到這里,相信大家對(duì)類的熱交換,jar的熱部署應(yīng)該有初步的概念了,但是這僅僅算是開胃小菜。由于熱部署一般都是和字節(jié)碼增強(qiáng)結(jié)合著來用的,所以這里我們先來大致熟悉一下Java Agent技術(shù)。
代碼增強(qiáng) 技術(shù)拾憶
話說在JDK中,一直有一個(gè)比較重要的jar包,名稱為rt.jar,他是java運(yùn)行時(shí)環(huán)境中,最核心和最底層的類庫的來源。比如java.lang.String, java.lang.Thread, java.util.ArrayList等均來源于這個(gè)類庫。今天我們所要講解的角色是rt.jar中的java.lang.instrument包,此包提供的功能,可以讓我們?cè)谶\(yùn)行時(shí)環(huán)境中動(dòng)態(tài)的修改系統(tǒng)中的類,而Java Agent作為其中一個(gè)重要的組件,極具特色。
現(xiàn)在我們有個(gè)場(chǎng)景,比如說,每次請(qǐng)求過來,我都想把jvm數(shù)據(jù)信息或者調(diào)用量上報(bào)上來,由于應(yīng)用已經(jīng)上線,無法更改代碼了,那么有什么辦法來實(shí)現(xiàn)嗎?當(dāng)然有,這也是Java Agent最擅長(zhǎng)的場(chǎng)合,當(dāng)然也不僅僅只有這種場(chǎng)合,諸如大名鼎鼎的熱部署JRebel,阿里的arthas,線上診斷工具btrace,UT覆蓋工具JaCoCo等,不一而足。
在使用Java Agent前,我們需要了解其兩個(gè)重要的方法:
/**
* main方法執(zhí)行之前執(zhí)行,manifest需要配置屬性Premain-Class,參數(shù)配置方式載入
*/
public static void premain(String agentArgs, Instrumentation inst);
/**
* 程序啟動(dòng)后執(zhí)行,manifest需要配置屬性Agent-Class,Attach附加方式載入
*/
public static void agentmain(String agentArgs, Instrumentation inst);
還有個(gè)必不可少的東西是MANIFEST.MF文件,此文件需要放置到resources/META-INF文件夾下,此文件一般包含如下內(nèi)容:
Premain-class : main方法執(zhí)行前執(zhí)行的agent類.
Agent-class : 程序啟動(dòng)后執(zhí)行的agent類.
Can-Redefine-Classes : agent是否具有redifine類能力的開關(guān),true表示可以,false表示不可以.
Can-Retransform-Classes : agent是否具有retransform類能力的開關(guān),true表示可以,false表示不可以.
Can-Set-Native-Method-Prefix : agent是否具有生成本地方法前綴能力的開關(guān),trie表示可以,false表示不可以.
Boot-Class-Path : 此路徑會(huì)被加入到BootstrapClassLoader的搜索路徑.
在對(duì)jar進(jìn)行打包的時(shí)候,最好打成fat jar,可以減少很多不必要的麻煩,maven加入如下打包內(nèi)容:
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-shade-plugin</artifactId>
<executions>
<execution>
<phase>package</phase>
<goals>
<goal>shade</goal>
</goals>
</execution>
</executions>
</plugin>
而MF配置文件,可以利用如下的maven內(nèi)容進(jìn)行自動(dòng)生成:
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-jar-plugin</artifactId>
<version>3.2.0</version>
<configuration>
<archive>
<manifestFile>src/main/resources/META-INF/MANIFEST.MF</manifestFile>
</archive>
</configuration>
</plugin>
工欲善其事必先利其器,準(zhǔn)備好了之后,先來手寫個(gè)Java Agent嘗鮮吧,模擬premain調(diào)用,main調(diào)用和agentmain調(diào)用。
首先是premain調(diào)用類 ,agentmain調(diào)用類,main調(diào)用類:
//main執(zhí)行前調(diào)用
public class AgentPre {
public static void premain(String agentArgs, Instrumentation inst) {
System.out.println("execute premain method");
}
}
//main主方法入口
public class App {
public static void main(String... args) throws Exception {
System.out.println("execute main method ");
}
}
//main執(zhí)行后調(diào)用
public class AgentMain {
public static void agentmain(String agentArgs, Instrumentation inst) {
System.out.println("execute agentmain method");
}
}
可以看到,邏輯很簡(jiǎn)單,輸出了方法執(zhí)行體中打印的內(nèi)容。之后編譯jar包,則會(huì)生成fat jar。需要注意的是,MANIFEST.MF文件需要手動(dòng)創(chuàng)建下,里面加入如下內(nèi)容:
Manifest-Version: 1.0
Premain-Class: com.tinywhale.deploy.javaAgent.AgentPre
Agent-Class: com.tinywhale.deploy.javaAgent.AgentMain
由于代碼是在IDEA中啟動(dòng),所以想要執(zhí)行premain,需要在App4a啟動(dòng)類上右擊:Run App.main(),之后IDEA頂部會(huì)出現(xiàn)App的執(zhí)行配置,我們需要點(diǎn)擊Edit Configurations選項(xiàng),然后在VM options中填入如下命令:
-javaagent:D:\app\tinywhale\tinywhale-deploy\target\tinywhale-deploy-1.0-SNAPSHOT-biz.jar
之后啟動(dòng)App,就可以看到輸出結(jié)果了。注意這里最好用fat jar,減少出錯(cuò)的機(jī)率。
execute premain method
execute main method
但是這里的話,我們看不到agentmain輸出,是因?yàn)閍gentmain的運(yùn)行,是需要進(jìn)行attach的,這里我們對(duì)agentmain進(jìn)行attach:
public class App {
public static void main(String... args) throws Exception {
System.out.println("execute main method ");
attach();
}
private static void attach() {
File agentFile = Paths.get("D:\\app\\tinywhale\\tinywhale-deploy\\target\\tinywhale-deploy-1.0-SNAPSHOT.jar").toFile();
try {
String name = ManagementFactory.getRuntimeMXBean().getName();
String pid = name.split("@")[0];
VirtualMachine jvm = VirtualMachine.attach(pid);
jvm.loadAgent(agentFile.getAbsolutePath());
} catch (Exception e) {
System.out.println(e);
}
}
}
啟動(dòng)app后,得到的結(jié)果為:
execute premain method
execute main method
execute agentmain method
可以看到,整個(gè)執(zhí)行都被串起來了。
講到這里,相信大家基本上理解java agent的執(zhí)行順序和配置了吧, premain執(zhí)行需要配置-javaagent啟動(dòng)參數(shù),而agentmain執(zhí)行需要attach vm pid。
看到這里,相信對(duì)java agent已經(jīng)有個(gè)初步的認(rèn)識(shí)了吧。接下來,我們就基于Java SPI + Java Agent + Javassist來實(shí)現(xiàn)一個(gè)插件系統(tǒng),這個(gè)插件系統(tǒng)比較特殊的地方,就是可以增強(qiáng)spring框架,使其路徑自動(dòng)注冊(cè)到component-scan路徑中,頗有點(diǎn)霸道(雞賊)的意思。Javassist框架的使用方式。
插件框架 玉汝于成
首先來說下這個(gè)框架的主體思路,使用Java SPI來做插件系統(tǒng);使用Java Agent來使得插件可以在main主入口方法前或者是方法后執(zhí)行;使用Javassist框架來進(jìn)行字節(jié)碼增強(qiáng),即實(shí)現(xiàn)對(duì)spring框架的增強(qiáng)。
針對(duì)插件部分,我們可以定義公共的接口契約:
public interface IPluginExecuteStrategy {
/**
* 執(zhí)行方法
* @param agentArgs
* @param inst
*/
void execute(String agentArgs, Instrumentation inst);
}
然后針對(duì)premain和agentmain,利用策略模式進(jìn)行組裝如下:
premain處理策略類
public class PluginPreMainExecutor implements IPluginExecuteStrategy{
/**
* 掃描加載的plugin,識(shí)別出@PreMainCondition并加載執(zhí)行
*/
@Override
public void execute(String agentArgs, Instrumentation inst) {
//獲取前置執(zhí)行集合
List<String> pluginNames = AgentPluginAnnotationHelper.annoProcess(PreMainCondition.class);
ServiceLoader<IPluginService> pluginServiceLoader = ServiceLoader.load(IPluginService.class);
//只執(zhí)行帶有PreMainCondition的插件
for (IPluginService pluginService : pluginServiceLoader) {
if (pluginNames.contains(pluginService.getPluginName())) {
pluginService.pluginLoad(agentArgs, inst);
}
}
}
}
agentmain處理策略類
public class PluginAgentMainExecutor implements IPluginExecuteStrategy {
/**
* 掃描加載的plugin,識(shí)別出@AgentMainCondition并加載執(zhí)行
*/
@Override
public void execute(String agentArgs, Instrumentation inst) {
//獲取后置執(zhí)行集合
List<String> pluginNames = AgentPluginAnnotationHelper.annoProcess(AgentMainCondition.class);
ServiceLoader<IPluginService> pluginServiceLoader = ServiceLoader.load(IPluginService.class);
for (IPluginService pluginService : pluginServiceLoader) {
//只執(zhí)行帶有AgentMainCondition的插件
if (pluginNames.contains(pluginService.getPluginName())) {
pluginService.pluginLoad(agentArgs, inst);
}
}
}
}
針對(duì)premain和agentmain,執(zhí)行器工廠如下:
public class AgentPluginContextFactory {
/**
* 創(chuàng)建agent pre執(zhí)行上下文
* @return
*/
public static PluginExecutorContext makeAgentPreExecuteContext() {
IPluginExecuteStrategy strategy = new PluginPreMainExecutor();
PluginExecutorContext context = new PluginExecutorContext(strategy);
return context;
}
/**
* 創(chuàng)建agent main執(zhí)行上下文
* @return
*/
public static PluginExecutorContext makeAgentMainExecuteContext() {
IPluginExecuteStrategy strategy = new PluginAgentMainExecutor();
PluginExecutorContext context = new PluginExecutorContext(strategy);
return context;
}
}
編寫Premain-Class和Agent-Class指定的類:
public class AgentPluginPreWrapper {
public static void premain(String agentArgs, Instrumentation inst) {
AgentPluginContextFactory.makeAgentPreExecuteContext().execute(agentArgs, inst);
}
}
public class AgentPluginMainWrapper {
public static void agentmain(String agentArgs, Instrumentation inst) {
AgentPluginContextFactory.makeAgentMainExecuteContext().execute(agentArgs, inst);
}
}
配置文件中指定相應(yīng)的類:
Manifest-Version: 1.0
Premain-Class: org.tiny.upgrade.core.AgentPluginPreWrapper
Agent-Class: org.tiny.upgrade.core.AgentPluginMainWrapper
Permissions: all-permissions
Can-Retransform-Classes: true
Can-Redefine-Classes: true
框架搭好后,來編寫插件部分,插件的話,需要繼承自org.tiny.upgrade.sdk.IPluginService并實(shí)現(xiàn):
@AgentMainCondition
@Slf4j
public class CodePadPluginServiceProvider implements IPluginService {
@Override
public String getPluginName() {
return "增強(qiáng)插件";
}
@Override
public void pluginLoad(String agentArgs, Instrumentation inst) {
//獲取已加載的所有類
Class<?>[] classes = inst.getAllLoadedClasses();
if (classes == null || classes.length == 0) {
return;
}
//需要將業(yè)務(wù)類進(jìn)行retransform一下,這樣可以避免在transform執(zhí)行的時(shí)候,找不到此類的情況
for (Class<?> clazz : classes) {
if (clazz.getName().contains(entity.getClassName())) {
try {
inst.retransformClasses(clazz);
} catch (UnmodifiableClassException e) {
log.error("retransform class fail:" + clazz.getName(), e);
}
}
}
//進(jìn)行增強(qiáng)操作
inst.addTransformer(new ByteCodeBizInvoker(), true);
}
@Override
public void pluginUnload() {
}
}
這里需要注意的是,在插件load的時(shí)候,我們做了class retransform操作,這樣操作的原因是因?yàn)?,在程序啟?dòng)的時(shí)候,有時(shí)候比如一些類,會(huì)在JavaAgent之前啟動(dòng),這樣會(huì)造成有些類在進(jìn)行增強(qiáng)的時(shí)候,無法處理,所以這里需要遍歷并操作下,避免意外情況。
下面是具體的增強(qiáng)操作:
@Slf4j
public class ByteCodeBizInvoker implements ClassFileTransformer {
/**
* 在此處加載tprd-ut并利用類加載器加載
*
* @param loader
* @param className
* @param classBeingRedefined
* @param protectionDomain
* @param classfileBuffer
* @return
* @throws IllegalClassFormatException
*/
@Override
public byte[] transform(ClassLoader loader
, String className
, Class<?> classBeingRedefined
, ProtectionDomain protectionDomain
, byte[] classfileBuffer) throws IllegalClassFormatException {
//java自帶的方法不進(jìn)行處理
if (loader == null) {
return null;
}
//增強(qiáng)spring5的componetscan,將org.tiny路徑塞入
if (className.contains("ComponentScanBeanDefinitionParser")) {
try {
System.out.println("增強(qiáng)spring");
ClassPool classPool = new ClassPool(true);
classPool.appendClassPath(ByteCodeBizInvoker.class.getName());
CtClass ctClass = classPool.get(className.replace("/", "."));
ClassFile classFile = ctClass.getClassFile();
MethodInfo methodInfo = classFile.getMethod("parse");
CtMethod ctMethod = ctClass.getDeclaredMethod("parse");
addComponentScanPackage(methodInfo, ctMethod);
return ctClass.toBytecode();
} catch (Exception e) {
log.error("handle spring 5 ComponentScanBeanDefinitionParser error", e);
}
}
}
/**
* 遍歷method,直至找到ReportTracer標(biāo)記類
*
* @param ctMethod
*/
private void addComponentScanPackage(MethodInfo methodInfo, CtMethod ctMethod) throws CannotCompileException {
final boolean[] success = {false};
CodeAttribute ca = methodInfo.getCodeAttribute();
CodeIterator codeIterator = ca.iterator();
//行遍歷方法體
while (codeIterator.hasNext()) {
ExprEditor exprEditor = new ExprEditor() {
public void edit(MethodCall m) throws CannotCompileException {
String methodCallName = m.getMethodName();
if (methodCallName.equals("getAttribute")) {
//將org.tiny追加進(jìn)去
m.replace("{ $_ = $proceed($$); $_ = $_ + \",org.tiny.upgrade\"; }");
success[0] = true;
}
}
};
ctMethod.instrument(exprEditor);
if (success[0]) {
break;
}
}
}
}
從上面可以看出,我們是修改了spring中的ComponentScanBeanDefinitionParser類,并將里面的parser方法中將org.tiny.upgrade包掃描路徑自動(dòng)注冊(cè)進(jìn)去,這樣當(dāng)別人集成我們的框架的時(shí)候,就無須掃描到框架也能執(zhí)行了。
寫到這里,相信大家對(duì)整體框架有個(gè)大概的認(rèn)識(shí)了。但是這個(gè)框架有個(gè)缺陷,就是我的插件jar寫完后,一定要放到項(xiàng)目的maven dependency中,然后打包部署才行。實(shí)際上有時(shí)候,我項(xiàng)目上線后,根本就沒有機(jī)會(huì)重新打包部署,那么接下來,我們就通過自定義Classloader來讓我們的插件不僅僅可以本地集成,而且可以從網(wǎng)絡(luò)中集成。
首先,我們需要定義自定義類加載器:
public class TinyPluginClassLoader extends URLClassLoader {
/**
* 帶參構(gòu)造
* @param urls
*/
public TinyPluginClassLoader(URL[] urls, ClassLoader parent) {
super(urls, parent);
}
/**
* 添加URL路徑
* @param url
*/
public void addURL(URL url) {
super.addURL(url);
}
}
這個(gè)類加載器,是不是很眼熟,和前面講的類似,但是帶了個(gè)parent classloader的標(biāo)記,這是為什么呢?這個(gè)標(biāo)記的意思是,當(dāng)前自定義的TinyPluginClassLoader的父classloader是誰,這樣的話,這個(gè)自定義類加載器就可以繼承父類加載器中的信息了,避免出現(xiàn)問題,這個(gè)細(xì)節(jié)大家注意。
這里需要說明的是,從本地jar文件加載還是從網(wǎng)絡(luò)jar文件加載,本質(zhì)上是一樣的,因?yàn)門inyPluginClassLoader是按照URL來的。
針對(duì)于本地jar文件,我們構(gòu)造如下URL即可:
URL url = new URL("jar:file:/D:/project/tiny-plugin-hello/target/tiny-plugin-hello-1.0-SNAPSHOT.jar!/")
針對(duì)于網(wǎng)絡(luò)jar文件,我們構(gòu)造如下URL即可:
URL url = new URL("jar:http://111.111.111.111/tiny-plugin-hello-1.0-SNAPSHOT.jar!/")
這樣,我們只需要定義好自定義類加載器加載邏輯即可:
/**
* 從jar文件中提取出對(duì)應(yīng)的插件類
*
* @param pluginClass
* @param jarFile
* @return
*/
public static Set<Class> loadPluginFromJarFile(Class pluginClass, JarFile jarFile, TinyPluginClassLoader tinyPluginClassLoader) {
Set<Class> pluginClasses = new HashSet<Class>();
Enumeration<JarEntry> jars = jarFile.entries();
while (jars.hasMoreElements()) {
JarEntry jarEntry = jars.nextElement();
String jarEntryName = jarEntry.getName();
if (jarEntryName.charAt(0) == '/') {
jarEntryName = jarEntryName.substring(1);
}
if (jarEntry.isDirectory() || !jarEntryName.endsWith(".class")) {
continue;
}
String className = jarEntryName.substring(0, jarEntryName.length() - 6);
try {
Class clazz = tinyPluginClassLoader.loadClass(className.replace("/", "."));
if (clazz != null && !clazz.isInterface() && pluginClass.isAssignableFrom(clazz)) {
pluginClasses.add(clazz);
}
} catch (ClassNotFoundException e) {
log.error("PluginUtil.loadPluginFromJarFile fail",e);
}
}
return pluginClasses;
}
之后,我們就可以用如下代碼對(duì)一個(gè)具體的jar路徑進(jìn)行加載就行了:
/**
* 加載插件
*
* @return
*/
@Override
public Set<Class> loadPlugins(URL jarURL) {
try {
JarFile jarFile = ((JarURLConnection) jarURL.openConnection()).getJarFile();
getTinyPluginClassLoader().addURL(jarURL);
return PluginUtil.loadPluginFromJarFile(IPluginService.class, jarFile, getTinyPluginClassLoader());
} catch (IOException e) {
log.error("LoadPluginViaJarStrategy.loadPlugins fail", e);
return null;
}
}
最終,我們只需要利用SPI進(jìn)行動(dòng)態(tài)加載:
/**
* 執(zhí)行插件
*/
public void processPlugins(URL... urls) {
if (urls == null || urls.length == 0) {
log.error("jar url path empty");
return;
}
for (URL url : urls) {
pluginLoadFactory.loadJarPlugins(url);
}
ServiceLoader<IPluginService> serviceLoader = ServiceLoader.load(IPluginService.class, pluginLoadFactory.getPluginLoader());
for (IPluginService pluginService : serviceLoader) {
pluginService.Process();
}
}
這樣,我們不僅實(shí)現(xiàn)了插件化,而且我們的插件還支持從本地jar文件或者網(wǎng)絡(luò)jar文件加載。由于我們利用了agentmain對(duì)代碼進(jìn)行增強(qiáng),所以當(dāng)系統(tǒng)檢測(cè)到我這個(gè)jar的時(shí)候,下一次執(zhí)行會(huì)重新對(duì)代碼進(jìn)行增強(qiáng)并生效。
總結(jié)
到這里,我們的用餐進(jìn)入到尾聲了。也不知道這餐,您享用的是否高興?
其實(shí)本文的技術(shù),從雙親委派模型到自定義類加載器,再到基于自定義類加載器實(shí)現(xiàn)的類交換,基于Java SPI實(shí)現(xiàn)的類交換,最后到基于Java SPI+ Java Agent + Javassist實(shí)現(xiàn)的插件框架及框架支持遠(yuǎn)程插件化,來一步一步的向讀者展示所涉及的知識(shí)點(diǎn)。當(dāng)然,由于筆者知識(shí)有限,疏漏之處,還望海涵,真誠(chéng)期待我的拋磚,能夠引出您的玉石之言。