SpringBoot四大神器之一：Actuator

港控/mmm° 2023-10-13 20:47 40阅读 0赞

## 介绍 ##

actuator是spring boot提供的对应用系统的自省和监控的集成功能，可以对应用系统进行配置查看、相关功能统计等。

## 如何使用 ##

在pom文件中添加*spring-boot-starter-actuator*依赖

<dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter-actuator</artifactId>
            </dependency>

启动应用，日志里会打印actuator相关信息如下，

[![373808d682ae5d16faa530226c73df25.png][]][373808d682ae5d16faa530226c73df25.png 1]

没有spring-boot-starter-actuator依赖之前如下，

[![d4ec2125969a2a73a8307f3c7dd47541.png][]][d4ec2125969a2a73a8307f3c7dd47541.png 1]

## Actuator功能点说明 ##

Spring Boot Actuator的关键特性是在应用程序里提供众多Web端点，通过它们了解应用程序 运行时的内部状况。有了Actuator，你可以知道Bean在Spring应用程序上下文里是如何组装在一 起的，掌握应用程序可以获取的环境属性信息，获取运行时度量信息的快照…… Actuator提供了13个端点，具体如表7-1所示。

[![7e7b5449e7812f5a7001a2cb44628210.png][]][7e7b5449e7812f5a7001a2cb44628210.png 1]

[![607884fc4a97b45a124e107419269287.png][]][607884fc4a97b45a124e107419269287.png 1]

##### /info端点显示应用程序的基本描述[\#][Link 1] #####

*/info*，这个endpoint显示应用程序的基本描述，在之前的实践例子中我们看过它的返回信息，属性值来自*appliaction.properties*，同时也可以使用占位符获取pom.xml文件中的信息。任何以*info.*开头的属性都会在访问*[http://localhost:8080/info][http_localhost_8080_info]*时显示。

例如/info：首先在*application.properties*文件中添加对应的属性值，符号*@*包围的属性值来自pom.xml文件中的元素节点。

info.build.artifact=@project.artifactId@
    info.build.name=@project.name@
    info.build.description=@project.description@
    info.build.version=@project.version@

要获取配置文件中的节点值，需要在pom文件中进行一定的配置，首先在<build>节点里面添加：

<resources>
     <resource>
        <directory>src/main/resources</directory>
        <filtering>true</filtering>
     </resource>
    </resources>

然后在<plugins>节点里面增加对应的插件：

<plugin>
     <groupId>org.apache.maven.plugins</groupId>
     <artifactId>maven-resources-plugin</artifactId>
     <version>2.6</version>
     <configuration>
        <delimiters>
           <delimiter>@</delimiter>
        </delimiters>
        <useDefaultDelimiters>false</useDefaultDelimiters>
     </configuration>
    </plugin>

然后运行应用程序，访问[http://localhost:8080/info，可以看到下列信息][http_localhost_8080_info 1]

[![format_png][]][format_png 1]

*  */env*提供应用程序的环境变量，如果你在调试时想知道某个配置项在运行时的值，可以通过这个endpoint访问——访问*[http://localhost:8080/env][http_localhost_8080_env]*，可以看到很多方面的配置，例如，class path resources—\[tomcat.https.properties\]、applicationConfig—\[classpath:/application.properties\]、commonsConfig、systemEnvironment、systemProperties等。  
    这些变量的值由*Environment*实例中的*PropertySource*实例保存，根据这些属性值所在的层次，有可能在运行时已经做了值替换，跟配置文件中的不一样了。为了确认某个属性的具体值，例如*book.count.rate*属性，可以访问*[http://localhost:8080/env/book.counter.rate][http_localhost_8080_env_book.counter.rate]*来查询，如果跟配置文件中的不一样，则可能是被系统变量或者命令行参数覆盖了。*EnvironmentEndpoint*类负责实现上述功能，有兴趣可以再看看它的源码；
 *  */configprops*提供不同配置对象，例如*WebConfiguration.TomcatSslConnectionProperties*，它与/env不同的地方在于它会表示出与配置项绑定的对象。尝试下访问*[http://localhost:8080/configprops][http_localhost_8080_configprops]*，然后在网页中查询*custom.tomcat.https*，可以看到我们之前用于配置*TomcatSslConnector*对象的属性值(参见：[让你的Spring Boot工程支持HTTP和HTTPS][Spring Boot_HTTP_HTTPS])。
    
    [![format_png 2][]][format_png 2 1]
    
    TomcatSslConnector对应的属性值
 *  */autoconfig*以web形式对外暴露AutoConfiguration 信息，这些信息的解释可以参考[Spring Boot：定制自己的starter][Spring Boot_starter]一文，这样我们就不需要通过“修改应用程序的日志级别和查看应用的启动信息”来查看应用的自动配置情况了。
 *  */beans*，这个endpoint列出所有由Spring Boot创建的bean。
    
    [![format_png 3][]][format_png 3 1]
    
    /beans显示所有Spring Boot创建的bean
 *  */mappings*，这个endpoint显示当前应用支持的URL映射，该映射关系由*HandlerMapping*类维护，通过这个endpoint可以查询某个URL的路由信息。
    
    [![format_png 4][]][format_png 4 1]
    
    /mappings查看URL映射

*  ##### */health*提供应用程序的健康状态，或者是某个核心模块的健康状态[\#][Link 2] #####

/health端点所提供的所有信息都是由一个或多个健康指示器提供的。表7-3列出了Spring Boot 自带的健康指示器：

[![831d0fb74f6b297b7cbd45810d7dacd3.png][]][831d0fb74f6b297b7cbd45810d7dacd3.png 1]

*  #### */metrics*，这个endpoint查看应用程序的度量值[\#][Link 3] ####

下表 /metrics端点报告的度量值和计数器，

[![253c618b1081f3af71af10f9f0d72f2e.png][]][253c618b1081f3af71af10f9f0d72f2e.png 1]

/metrics端点会返回所有的可用度量值，但你也可能只对某个值感兴趣。要获取单个值，请 求时可以在URL后加上对应的键名。例如，要查看空闲内存大小，可以向/metrics/mem.free发一 个GET请求：

[![14a3161210dda7d26906dd5b3df6b6f7.png][]][14a3161210dda7d26906dd5b3df6b6f7.png 1]

##### 垃圾收集器[\#][Link 4] #####

[![d0f873f832fb0013cb79652cdd84470c.png][]][d0f873f832fb0013cb79652cdd84470c.png 1]

##### [\#][Link 5] #####

##### http[\#][Link 6] #####

counter.status后的值是HTTP状态码，随后是所请 求的路径。举个例子，counter.status.200.metrics表明/metrics端点返回200（OK）状态码 的次数。 HTTP的度量信息在结构上也差不多，却在报告另一类信息。它们全部以gauge.response开头， 表明这是HTTP响应的度量信息。前缀后是对应的路径。度量值是以毫秒为单位的时间，反映了 近处理该路径请求的耗时。举个例子，代码清单7-6里的gauge.response.beans说明上一次 请求耗时169毫秒。 这里还有几个特殊的值需要注意。root路径指向的是根路径或/。

star-star代表了那些Spring 认为是静态资源的路径，包括图片、JavaScript和样式表，其中还包含了那些找不到的资源。这就 是为什么你经常会看到counter.status.404.star-star，这是返回了HTTP 404 (NOT FOUND) 状态的请求数。

[![daef0528e016c24cad00e29e004a86da.png][]][daef0528e016c24cad00e29e004a86da.png 1]

#### /trace追踪Web请求[\#][Link 7] ####

/trace端点能报告所有Web请求的详细信息，包括请求方法、路径、时间戳以及请求和响应的 头信息。代码清单7-7是/trace输出的一个片段，其中包含了整个请求跟踪项。

[![7355ccc78a2d3e1dd0561aeb5d41572e.png][]][7355ccc78a2d3e1dd0561aeb5d41572e.png 1]

正如method和path属性所示，你可以看到这个跟踪项是一个针对/metrics的请求。 timestamp属性（以及响应中的Date头）告诉了你请求的处理时间。headers属性的内容是请 求和响应中所携带的头信息。 虽然代码清单7-7里只显示了一条跟踪项，但/trace端点实际能显示近100个请求的信息，包 含对/trace自己的请求。它在内存里维护了一个跟踪库。稍后在7.4.4节里，你会看到如何创建一 个自定义的跟踪库实现，以便将请求的跟踪持久化。

##### /dump导出线程活动[\#][Link 8] #####

/dump端点会生成当前线程活动的快照。完整的线程导出报告里会包含应用程序的每个线程。为了节省空间，下面只放了 一个线程的内容片段。如你所见，其中包含很多线程的特定信息，还有线程相关的阻塞和锁状态。 本例中，还有一个跟踪栈（stack trace），表明这是一个Tomcat容器线程。

##### /shutdown端点关闭应用程序[\#][Link 9] #####

为了关闭应用程序，你要往/shutdown发送一个POST请求。很显然，关闭运行中的应用程序是件危险的事情，因此这个端点默认是关闭的。要开启该端点，可以将endpoints.shutdown.enabled设置为true。举例来说，可以把如 下内容加入application.yml，借此开启/shutdown端点：

endpoints.shutdown.enabled=true

[![e804211e8fc576fa998454448786d739.png][]][e804211e8fc576fa998454448786d739.png 1]

GET请求提示不支持，如下图：

[![daf7ba765536a5996b7b631de8d58194.png][]][daf7ba765536a5996b7b631de8d58194.png 1]

用fiddler模拟一个POST请求，可以成功关闭应用，如下图：

[![25ece2f351930b87b458a61c53fa1dcb.png][]][25ece2f351930b87b458a61c53fa1dcb.png 1]

上述各个endpoint是Spring Boot Actuator提供的接口和方法，接下来看看我们自己定制的*HealthIndicator*，我们只需要实现*HealthIndicator*接口，Spring Boot会收集该接口的实现，并加入到*/health*这个endpoint中。

在我们的例子中，我们为每个*CrudRepository*实例都创建了一个*HealthIndicator*实例，为此我们创建了一个*CompositeHealthIndicator*实例，由这个实例管理所有的*DbHealthIndicator*实例。作为一个*composite*，它会提供一个内部的层次关系，从而可以返回JSON格式的数据。

代码中的*HealthAggregator*实例的作用是：它维护一个map，告诉*CompositeHealthIndicator*如何决定所有*HealthIndicator*代表的整体的状态。例如，除了一个repository返回DOWN其他的都返回UP，这时候这个composite indicator作为一个整体应该返回UP还是DOWN，*HealthAggregator*实例的作用就在这里。

Spring Boot使用的默认的*HealthAggregator*实现是*OrderedHealthAggregator*，它的策略是手机所有的内部状态，然后选出在DOWN、OUT\_OF\_SERVICE、UP和UNKNOWN中间具有最低优先级的那个状态。这里使用策略设计模式，因此具体的状态判定策略可以改变和定制，例如我们可以创建定制的*HealthAggregator*：

最后需要考虑下安全问题，通过这些endpoints暴露出很多应用的信息，当然，Spring Boot也提供了配置项，可以关闭指定的endpoint——在application.properties中配置*<name>.enable=false*；

还可以通过设置*management.port=-1*关闭endpoint的HTTP访问接口，或者是设置其他的端口，供内部的admin服务访问；除了控制端口，还可以设置仅仅让本地访问，只需要设置*management.address=127.0.0.1*；通过设置*management.context-path=/admin*，可以设置指定的根路径。综合下，经过上述设置，在本地访问*[http://127.0.0.1/admin/health][http_127.0.0.1_admin_health]*来访问健康状态。

可以在防火墙上屏蔽掉不是/admin/\*的endpoints访问请求，更进一步，利用Spring Security可以配置验证信息，这样要访问当前应用的endpoints必须使用用户名和密码登陆。

### 二、连接Actuator的远程 shell[\#][Link 10] ###

Actuator通过REST端点提供了不少非常有用的信息。另一个深入运行中应用程序内部的方式 是使用远程shell。Spring Boot集成了CRaSH，一种能嵌入任意Java应用程序的shell。Spring Boot 还扩展了CRaSH，添加了不少Spring Boot特有的命令，提供了与Actuator端点类似的功能。 要使用远程shell，只需加入远程shell的起步依赖即可。你需要这样的Gradle依赖：

compile("org.springframework.boot:spring-boot-starter-remote-shell")

如果用Maven构建项目，你需要在pom.xml文件里添加如下依赖：

<dependency>   
        <groupId>org.springframework.boot</groupId>   
        <artifactId>spring-boot-starter-remote-shell</artifactId> 
    </dependency>

添加了远程shell依赖后，就可以构建并运行应用程序了。在启动的时候，可以看到要写进日 志的一行密码。这行密码所在的行大概是这样的：

Using default password for shell access: c59b152d-f7e2-41de-86f1-6c3e9e38229b

现在你可以通过SSH工具连接shell了，它监听的端口号是2000。如果你用的是Unix的ssh命 令，那么它看起来大概是这样的：

[![1457efa1e54562620c7cefde85c9bf4a.png][]][1457efa1e54562620c7cefde85c9bf4a.png 1]

账号密码分别是user/c59b152d-f7e2-41de-86f1-6c3e9e38229b

[![563b879f55f7ec3278727bbb4ed9d06d.png][]][563b879f55f7ec3278727bbb4ed9d06d.png 1]

登陆成功后，显示如下：

[![74aae40cf62f1e6fcc131a0f5b47fe9d.png][]][74aae40cf62f1e6fcc131a0f5b47fe9d.png 1]

远程shell提供了24个可以在运行应用程序上下文中执行的命令，其中大部分都是CRaSH自带 的。但Spring Boot也添加了一些。表7-4列出了这些Spring Boot特有的命令。

[![127f35ecb7cf5f6a36d57e359e55edef.png][]][127f35ecb7cf5f6a36d57e359e55edef.png 1]

例如用autoconfig生成了一个与Actuatord的/autoconfig端点类似的报告。

[![133382894bec671eee3f18471d61cacb.png][]][133382894bec671eee3f18471d61cacb.png 1]

metrics

[![0a525bce8ff39230c8ad8c33a6d7b516.png][]][0a525bce8ff39230c8ad8c33a6d7b516.png 1]

### 三、通过JMX监控应用程序 [\#][Link 11] ###

除了REST端点和远程shell，Actuator还把它的端点以MBean的方式发布了出来，可以通过 JMX来查看和管理。使用JMX是管理Spring Boot应用程序的一个好方法，如果你已在用JMX管理 应用程序中的其他MBean，则尤其如此。

Actuator的端点都发布在org.springframework.boot域下。比如，你想要查看应用程序的请求映 射关系，那么可以看一下图7-6（通过JConsole查看请求映射端点）。

[![25020144a681013203c5247d46b8630c.png][]][25020144a681013203c5247d46b8630c.png 1]

连接成功后，

[![0e8dc802d6caa7983b78a786b23ab344.png][]][0e8dc802d6caa7983b78a786b23ab344.png 1]

[![6925b4a882520b6c6a103dd51db6d3ab.png][]][6925b4a882520b6c6a103dd51db6d3ab.png 1]

[![d6390076c83ca36b9666d24ddbe620de.png][]][d6390076c83ca36b9666d24ddbe620de.png 1]

[373808d682ae5d16faa530226c73df25.png]: https://img-blog.csdnimg.cn/img_convert/373808d682ae5d16faa530226c73df25.png
[373808d682ae5d16faa530226c73df25.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816095514084-2004111997.png
[d4ec2125969a2a73a8307f3c7dd47541.png]: https://img-blog.csdnimg.cn/img_convert/d4ec2125969a2a73a8307f3c7dd47541.png
[d4ec2125969a2a73a8307f3c7dd47541.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816095718334-970527245.png
[7e7b5449e7812f5a7001a2cb44628210.png]: https://img-blog.csdnimg.cn/img_convert/7e7b5449e7812f5a7001a2cb44628210.png
[7e7b5449e7812f5a7001a2cb44628210.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816152757350-954364156.png
[607884fc4a97b45a124e107419269287.png]: https://img-blog.csdnimg.cn/img_convert/607884fc4a97b45a124e107419269287.png
[607884fc4a97b45a124e107419269287.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816152816318-943225052.png
[Link 1]: https://www.cnblogs.com/itplay/p/10742045.html#722354135
[http_localhost_8080_info]: http://localhost:8080/info
[http_localhost_8080_info 1]: http://localhost:8080/info%EF%BC%8C%E5%8F%AF%E4%BB%A5%E7%9C%8B%E5%88%B0%E4%B8%8B%E5%88%97%E4%BF%A1%E6%81%AF
[format_png]: https://img-blog.csdnimg.cn/img_convert/54d257e8c74088a98b828839d41641f7.webp?x-oss-process=image/format,png
[format_png 1]: https://upload-images.jianshu.io/upload_images/44770-413b1068facdd8b1.png?imageMogr2/auto-orient/strip%7CimageView2/2
[http_localhost_8080_env]: http://localhost:8080/env
[http_localhost_8080_env_book.counter.rate]: http://localhost:8080/env/book.counter.rate
[http_localhost_8080_configprops]: http://localhost:8080/configprops
[Spring Boot_HTTP_HTTPS]: http://www.jianshu.com/p/c3879add87ec
[format_png 2]: https://img-blog.csdnimg.cn/img_convert/69be58ccec0ff4c1b3868ce709ae990e.webp?x-oss-process=image/format,png
[format_png 2 1]: https://upload-images.jianshu.io/upload_images/44770-6b4110ded5aaa096.png?imageMogr2/auto-orient/strip%7CimageView2/2
[Spring Boot_starter]: http://www.jianshu.com/p/85460c1d835a
[format_png 3]: https://img-blog.csdnimg.cn/img_convert/af0b6d5936d245675d6966aab3dc6b8e.webp?x-oss-process=image/format,png
[format_png 3 1]: https://upload-images.jianshu.io/upload_images/44770-5d83047969ca2fb9.png?imageMogr2/auto-orient/strip%7CimageView2/2
[format_png 4]: https://img-blog.csdnimg.cn/img_convert/dbbb2b75bd720041f4ae4935a67a4417.webp?x-oss-process=image/format,png
[format_png 4 1]: https://upload-images.jianshu.io/upload_images/44770-6488c74732086772.png?imageMogr2/auto-orient/strip%7CimageView2/2
[Link 2]: https://www.cnblogs.com/itplay/p/10742045.html#1372366799
[831d0fb74f6b297b7cbd45810d7dacd3.png]: https://img-blog.csdnimg.cn/img_convert/831d0fb74f6b297b7cbd45810d7dacd3.png
[831d0fb74f6b297b7cbd45810d7dacd3.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816140438553-1551083618.png
[Link 3]: https://www.cnblogs.com/itplay/p/10742045.html#2216343053
[253c618b1081f3af71af10f9f0d72f2e.png]: https://img-blog.csdnimg.cn/img_convert/253c618b1081f3af71af10f9f0d72f2e.png
[253c618b1081f3af71af10f9f0d72f2e.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816105351131-1069860639.png
[14a3161210dda7d26906dd5b3df6b6f7.png]: https://img-blog.csdnimg.cn/img_convert/14a3161210dda7d26906dd5b3df6b6f7.png
[14a3161210dda7d26906dd5b3df6b6f7.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816105604271-1275261715.png
[Link 4]: https://www.cnblogs.com/itplay/p/10742045.html#136669534
[d0f873f832fb0013cb79652cdd84470c.png]: https://img-blog.csdnimg.cn/img_convert/d0f873f832fb0013cb79652cdd84470c.png
[d0f873f832fb0013cb79652cdd84470c.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816105751506-2131839632.png
[Link 5]: https://www.cnblogs.com/itplay/p/10742045.html#55852479
[Link 6]: https://www.cnblogs.com/itplay/p/10742045.html#1418169828
[daef0528e016c24cad00e29e004a86da.png]: https://img-blog.csdnimg.cn/img_convert/daef0528e016c24cad00e29e004a86da.png
[daef0528e016c24cad00e29e004a86da.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816110513303-1292980937.png
[Link 7]: https://www.cnblogs.com/itplay/p/10742045.html#1758011417
[7355ccc78a2d3e1dd0561aeb5d41572e.png]: https://img-blog.csdnimg.cn/img_convert/7355ccc78a2d3e1dd0561aeb5d41572e.png
[7355ccc78a2d3e1dd0561aeb5d41572e.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816111231037-536053304.png
[Link 8]: https://www.cnblogs.com/itplay/p/10742045.html#787248314
[Link 9]: https://www.cnblogs.com/itplay/p/10742045.html#3264709543
[e804211e8fc576fa998454448786d739.png]: https://img-blog.csdnimg.cn/img_convert/e804211e8fc576fa998454448786d739.png
[e804211e8fc576fa998454448786d739.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816142021209-981907614.png
[daf7ba765536a5996b7b631de8d58194.png]: https://img-blog.csdnimg.cn/img_convert/daf7ba765536a5996b7b631de8d58194.png
[daf7ba765536a5996b7b631de8d58194.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816142204475-1634612733.png
[25ece2f351930b87b458a61c53fa1dcb.png]: https://img-blog.csdnimg.cn/img_convert/25ece2f351930b87b458a61c53fa1dcb.png
[25ece2f351930b87b458a61c53fa1dcb.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816141707178-1833275872.png
[http_127.0.0.1_admin_health]: http://127.0.0.1/admin/health
[Link 10]: https://www.cnblogs.com/itplay/p/10742045.html#309880948
[1457efa1e54562620c7cefde85c9bf4a.png]: https://img-blog.csdnimg.cn/img_convert/1457efa1e54562620c7cefde85c9bf4a.png
[1457efa1e54562620c7cefde85c9bf4a.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143239131-1726995518.png
[563b879f55f7ec3278727bbb4ed9d06d.png]: https://img-blog.csdnimg.cn/img_convert/563b879f55f7ec3278727bbb4ed9d06d.png
[563b879f55f7ec3278727bbb4ed9d06d.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143412771-1738628996.png
[74aae40cf62f1e6fcc131a0f5b47fe9d.png]: https://img-blog.csdnimg.cn/img_convert/74aae40cf62f1e6fcc131a0f5b47fe9d.png
[74aae40cf62f1e6fcc131a0f5b47fe9d.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143504459-1383438971.png
[127f35ecb7cf5f6a36d57e359e55edef.png]: https://img-blog.csdnimg.cn/img_convert/127f35ecb7cf5f6a36d57e359e55edef.png
[127f35ecb7cf5f6a36d57e359e55edef.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143641225-1288478902.png
[133382894bec671eee3f18471d61cacb.png]: https://img-blog.csdnimg.cn/img_convert/133382894bec671eee3f18471d61cacb.png
[133382894bec671eee3f18471d61cacb.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143818506-535195903.png
[0a525bce8ff39230c8ad8c33a6d7b516.png]: https://img-blog.csdnimg.cn/img_convert/0a525bce8ff39230c8ad8c33a6d7b516.png
[0a525bce8ff39230c8ad8c33a6d7b516.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816143906631-606735949.png
[Link 11]: https://www.cnblogs.com/itplay/p/10742045.html#2686448246
[25020144a681013203c5247d46b8630c.png]: https://img-blog.csdnimg.cn/img_convert/25020144a681013203c5247d46b8630c.png
[25020144a681013203c5247d46b8630c.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816144238225-1323864347.png
[0e8dc802d6caa7983b78a786b23ab344.png]: https://img-blog.csdnimg.cn/img_convert/0e8dc802d6caa7983b78a786b23ab344.png
[0e8dc802d6caa7983b78a786b23ab344.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816144257209-2033252722.png
[6925b4a882520b6c6a103dd51db6d3ab.png]: https://img-blog.csdnimg.cn/img_convert/6925b4a882520b6c6a103dd51db6d3ab.png
[6925b4a882520b6c6a103dd51db6d3ab.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816144422771-1512948255.png
[d6390076c83ca36b9666d24ddbe620de.png]: https://img-blog.csdnimg.cn/img_convert/d6390076c83ca36b9666d24ddbe620de.png
[d6390076c83ca36b9666d24ddbe620de.png 1]: https://images2017.cnblogs.com/blog/285763/201708/285763-20170816144614021-573136532.png