开源框架JarsLink，基于JAVA的模块化开发框架

怼烎@ 2022-05-29 12:08 300阅读 0赞

## 开源框架JarsLink，基于JAVA的模块化开发框架的简单了解 ##

**JarsLink (原名Titan) 是一个基于JAVA的模块化开发框架，它提供在运行时动态加载模块（一个JAR包）、卸载模块和模块间调用的API。JarsLink是蚂\*蚁\*金\*服\*微\*贷事业群技术部开发的JAVA框架。**

需求背景

应用拆分的多或少都有问题。多则维护成本高，每次发布一堆应用。少则拆分成本高，无用功能很难下线。

故障不隔离。当一个系统由多人同时参与开发时，修改A功能，可能会影响B功能，引发故障。

多分支开发引发冲突。多分支开发完之后合并会产生冲突。

牵一发动全身。一处核心代码的改动，或一个基础Jar的升级需要回归整个系统。

升级和迁移成本高。中间件升级每个应用都有升级成本。

模块化开发的好处

![u_291932797_2367985571_fm_173_app_25_f_JPEG_w_640_h_326_s_7C11EE1EDD62C4095B759C7A03005071][]

可插拔，一个应用由多个模块组成，应用里的模块可拆和合，模块可快速在多个系统中迁移和部署。

模块化开发，模块之间互相隔离，实现故障隔离。

一个模块一个分支，不会引发代码冲突。

在模块中增加或修改功能，只会影响当前模块，不会影响整个应用。

动态部署，在运行时把模块部署到应用中，快速修复故障，提高发布效率。

多版本部署，可以在运行时同时部署某个模块的新旧版本，进行AB TEST。

减少资源消耗，通过部署模块的方式减少应用数量和机器数量。

JarsLink的应用场景

微服务集成测试, 目前一个微服务是一个FAT JAR,如果有几十个微服务,则需要启动很多进程,DEBUG端口会很多,使用JarsLink框架合并FAT JAR,再路由请求到其他JAR,就可以只启动一个进程进行DEBUG测试。

数据管理中心，数据采集的数据源多，而且每种数据源都需要对接和开发，通过模块化开发，实现一个数据源使用一个模块进行对接。

指标计算系统，每个TOPIC一个模块，把消息转发到模块中进行消息处理。

后台管理系统，几乎每个系统都有后台开发的需求，新建应用则应用数多，维护成本高，引入模块化开发，一个二级域一个模块来开发后台功能。

JarsLink的特性

隔离性

类隔离：框架为每个模块的Class使用单独的ClassLoader来加载，每个模块可以依赖同一种框架的不同的版本。

实例隔离：框架为每个模块创建了一个独立的Spring上下文，来加载模块中的BEAN，实例化失败不会影响其他模块。

资源隔离：后续会支持模块之间的资源隔离，每个模块使用独立的CPU和内存资源。

动态性

动态发布：模块能在运行时动态加载到系统中，实现不需要重启和发布系统新增功能。支持突破双亲委派机制，在运行时加载父加载器已经加载过的类，实现模块升级依赖包不需要系统发布。

动态卸载：模块能在运行时被动态卸载干净，实现快速下线不需要功能。

易用性

提供了通用灵活的API让系统和模块进行交互。

实现原理

1、模块加载

JarsLink为每个模块创建一个新的URLClassLoader来加载模块，并且为每个模块创建一个单独的IOC容器来存放本模块的BEAN。支持突破双亲委派，申明了overridePackages的包将由子类加载进行加载。

2、模块的卸载

卸载模块需要满足三个条件

模块里的实例对象没有被引用

模块里的Class没有被引用

类加载器没有被引用

所以需要做到三点卸载实例，卸载类和卸载类加载器，整个模块的卸载顺序如下：

![u_974743926_1324168017_fm_173_app_25_f_JPEG_w_640_h_98][]

关闭资源：关闭HTTP连接池或线程池。

关闭IOC容器：调用applicationContext.close()方法关闭IOC容器。

移除类加载器：去掉模块的引用。

卸载JVM租户（开发中）：卸载该模块使用的JVM租户，释放资源。

3、模块间隔离

模块化开发需要解决隔离性问题，否则各模块之间会互相影响。

模块之间的隔离有三个层次，类隔离，实例隔离和资源（CPU和内存）隔离。目前JarsLink实现了类隔离和实例隔离，通过为每个模块创建一个类加载器来实现类隔离，通过为模块模块创建一个新的IOC容器来实现实例隔离。资源隔离准备引入JVM多租户来解决。

![u_998688095_2160744044_fm_173_app_25_f_JPEG_w_640_h_230_s_39AA503385F25F205C4924D6000080B2][]

4、模块间通讯

模块之间的通讯也有三种方式，RPC，本地调用，深克隆/反射。

![u_1540609551_739693681_fm_173_app_25_f_JPEG_w_640_h_231_s_A8A2B61E41707C2ADAD9805A0300C0B2][]

本地调用：目前JarsLink的doAction就是使用的这种通讯方式，这种方式要求模块的类加载器是父子关系，且IOC容器也是父子容器。

RPC调用：用于跨JVM的模块之间调用，利用SOFA 4动态API在模块中发布和引用TR服务来实现。

深克隆/反射（集成中）：深克隆其他模块的入参，反射其他模块的方法实现调用。

5、类加载机制

OSGI类加载机制的关系采用的是网状结构，每个模块通过 Export-Package 来声明我要给别人用哪些类，通过 Import-Package来声明我要用别人的哪些类。而JarsLink采用的是扁平化管理，每个模块都有一个共同的父类，这个父类加载器就是加载ModuleLoader类的加载器。

6、JarsLink框架类图

JarsLink框架的类图如下：

ModuleLoader：模块加载引擎，负责模块加载。

ModuleManager：模块管理者，负责在运行时注册，卸载，查找模块和执行Action。

Module：模块，一个模块有多个Action。

Action：模块里的执行者。

应用场景

1、后台管理系统

互联网应用发展到一定阶段会出现很多后台需求，如客服查询用户的信息帮助解答问题，开发查后台数据排查系统BUG，运营使用后台功能发送运营活动等。这些功能发布频率会大于核心系统，所以如果放在核心系统里会影响其稳定性，所以我们必须要建一个后台系统来搭建后台功能，但是这样又带来一个新的问题，很多开发都会来这个系统进行开发，拉多分支造成代码冲突，A业务的BUG影响到B业务。

所以如果每个业务线一个模块，每个模块使用一个单独的分支进行开发，就能进行隔离开发，提高开发速度，开发完后在运行时加载到系统中。

2、数据采集系统

如果你需要开发一个数据管理系统，这个系统需要去不同的异构系统采集数据，这些系统会提供不同类型的接口，如RPC，HTTP等。并且数据采集的数据源多，而且每种数据源都需要对接和开发，数据质量比较差，需要经常修改代码进行发布。

所以通过模块化开发，实现一个数据源使用一个模块进行对接，上线新数据源可以新增模块，修改BUG也能快速上线。

3、微服务集成测试

[u_291932797_2367985571_fm_173_app_25_f_JPEG_w_640_h_326_s_7C11EE1EDD62C4095B759C7A03005071]: /images/20220529/b7f54acf68114f1f9adf34a3cc501412.png
[u_974743926_1324168017_fm_173_app_25_f_JPEG_w_640_h_98]: /images/20220529/0399bf83b95f45fcb6164756763717c9.png
[u_998688095_2160744044_fm_173_app_25_f_JPEG_w_640_h_230_s_39AA503385F25F205C4924D6000080B2]: /images/20220529/791ff95bbdd2408b93d2b2034c8887c5.png
[u_1540609551_739693681_fm_173_app_25_f_JPEG_w_640_h_231_s_A8A2B61E41707C2ADAD9805A0300C0B2]: /images/20220529/137fe069bf6b4cc992cc6cf9ccb3d4e9.png