Dubbo支持的协议

柔情只为你懂 2022-09-09 00:09 258阅读 0赞

Dubbo支持dubbo、rmi、hessian、http、webservice、thrift、redis等多种协议，但是Dubbo官网是推荐我们使用Dubbo协议的。

一、Dubbo支持的协议

下面我们就针对Dubbo的每种协议详解讲解，以便我们在实际应用中能够正确取舍。

1、dubbo 协议 (默认)

1、dubbo 缺省协议 采用单一长连接和NIO异步通讯，适合于小数据量大并发的服务调用，以及服务消费者机器数远大于服务提供者机器数的情况
2、不适合传送大数据量的服务，比如传文件，传视频等，除非请求量很低。

缺省协议，使用基于mina1.1.7+hessian3.2.1的tbremoting交互。

特性：

连接个数：单连接
连接方式：长连接
传输协议：TCP
传输方式：NIO异步传输
序列化：Hessian 二进制序列化
适用范围：传入传出参数数据包较小（建议小于100K），消费者比提供者个数多，单一消费者无法压满提供者，尽量不要用dubbo协议传输大文件或超大字符串。
适用场景：常规远程服务方法调用

配置：

  1. <!--配置协议： -->
  2. <dubbo:protocol name="dubbo" port="20880" />
  4. <!--设置默认协议：-->
  5. <dubbo:provider protocol="dubbo" />
  7. <!--设置某个服务的协议：-->
  8. <dubbo:service interface="..." protocol="dubbo" />
  10. <!--多端口：-->
  11. <dubbo:protocol id="dubbo1" name="dubbo" port="20880" />
  12. <dubbo:protocol id="dubbo2" name="dubbo" port="20881" />
  14. <!--配置协议选项：-->
  15. <dubbo:protocol name=“dubbo” port=“9090” server=“netty” client=“netty” codec=“dubbo” serialization=“hessian2” charset=“UTF-8” threadpool=“fixed” threads=“100” queues=“0” iothreads=“9” buffer=“8192” accepts=“1000” payload=“8388608” />

Dubbo协议缺省每服务每提供者每消费者使用单一长连接，如果数据量较大，可以使用多个连接。

  1. <dubbo:protocol name="dubbo" connections="2" />
  • 或表示该服务使用JVM共享长连接。(缺省)
  • 或表示该服务使用独立长连接。
  • 或表示该服务使用独立两条长连接。

为防止被大量连接撑挂，可在服务提供方限制大接收连接数，以实现服务提供方自我保护

  1. <dubbo:protocol name="dubbo" accepts="1000" />

常见问题

为什么要消费者比提供者个数多?

因 dubbo 协议采用单一长连接，假设网络为千兆网卡 3，根据测试经验数据每条连接最多只能压满 7MByte(不同的环境可能不一样，供参考)，理论上 1 个服务提供者需要 20 个服务消费者才能压满网卡。

为什么不能传大包?

因 dubbo 协议采用单一长连接，如果每次请求的数据包大小为 500KByte，假设网络为千兆网卡 3，每条连接最大 7MByte(不同的环境可能不一样，供参考)，单个服务提供者的 TPS(每秒处理事务数)最大为：128MByte / 500KByte = 262。单个消费者调用单个服务提供者的 TPS(每秒处理事务数)最大为：7MByte / 500KByte = 14。如果能接受，可以考虑使用，否则网络将成为瓶颈。

为什么采用异步单一长连接?

因为服务的现状大都是服务提供者少，通常只有几台机器，而服务的消费者多，可能整个网站都在访问该服务，比如 Morgan 的提供者只有 6 台提供者，却有上百台消费者，每天有 1.5 亿次调用，如果采用常规的 hessian 服务，服务提供者很容易就被压跨，通过单一连接，保证单一消费者不会压死提供者，长连接，减少连接握手验证等，并使用异步 IO，复用线程池，防止 C10K 问题。

2、http 协议

基于 HTTP 表单的远程调用协议，采用 Spring 的 HttpInvoker 实现

提示：2.3.0 以上版本支持

特性

  • 连接个数：多连接
  • 连接方式：短连接
  • 传输协议：HTTP
  • 传输方式：同步传输
  • 序列化：表单序列化
  • 适用范围：传入传出参数数据包大小混合，提供者比消费者个数多，可用浏览器查看，可用表单或URL传入参数，暂不支持传文件。
  • 适用场景：需同时给应用程序和浏览器 JS 使用的服务。

配置：

  1. <!-- 配置协议：-->
  2. <dubbo:protocol   name="http"  port="8080" />
  4. <!-- 配置 Jetty Server (默认)：-->
  5. <dubbo:protocol ...  server="jetty" />
  7. <!-- 配置 Servlet Bridge Server (推荐使用)： -->
  8. <dubbo:protocol ... server="servlet" />

配置 DispatcherServlet：

  1. <servlet>
  2.          <servlet-name>dubbo</servlet-name>
  3.          <servlet-class>org.apache.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class>
  4.          <load-on-startup>1</load-on-startup>
  5. </servlet>
  6. <servlet-mapping>
  7.          <servlet-name>dubbo</servlet-name>
  8.          <url-pattern>/*</url-pattern>
  9. </servlet-mapping>

注意，如果使用 servlet 派发请求：

  • 协议的端口 <dubbo:protocol port="8080" /> 必须与 servlet 容器的端口相同，
  • 协议的上下文路径 <dubbo:protocol contextpath="foo" /> 必须与 servlet 应用的上下文路径相同。

3、hessian 协议

Hessian 协议用于集成 Hessian 的服务，Hessian 底层采用 Http 通讯，采用 Servlet 暴露服务，Dubbo 缺省内嵌 Jetty 作为服务器实现。

Dubbo 的 Hessian 协议可以和原生 Hessian 服务互操作，即：

提供者用 Dubbo 的 Hessian 协议暴露服务，消费者直接用标准 Hessian 接口调用
或者提供方用标准 Hessian 暴露服务，消费方用 Dubbo 的 Hessian 协议调用。
Hessian 是 Caucho 开源的一个 RPC 框架，其通讯效率高于 WebService 和 Java 自带的序列化。

特性：

连接个数：多连接
连接方式：短连接
传输协议：HTTP
传输方式：同步传输
序列化：Hessian二进制序列化
适用范围：传入传出参数数据包较大，提供者比消费者个数多，提供者压力较大，可传文件。
适用场景：页面传输，文件传输，或与原生hessian服务互操作

依赖：

  1. <dependency>
  2.     <groupId>com.caucho</groupId>
  3.     <artifactId>hessian</artifactId>
  4.     <version>4.0.7</version>
  5. </dependency>

配置：

  1. <!-- 定义 hessian 协议： -->
  2. <dubbo:protocol name="hessian" port="8080" server="jetty" />
  4. <!--设置默认协议： -->
  5. <dubbo:provider protocol="hessian" />
  7. <!-- 设置 service 协议： -->
  8. <dubbo:service protocol="hessian" />
  10. <!-- 多端口：-->
  11. <dubbo:protocol id="hessian1" name="hessian" port="8080" />
  12. <dubbo:protocol id="hessian2" name="hessian" port="8081" />
  14. <!--直连：-->
  15. <dubbo:reference id="helloService" interface="HelloWorld" url="hessian://10.20.153.10:8080/helloWorld" />

Hessian 是 Caucho 开源的一个 RPC 框架，其通讯效率高于 WebService 和 Java 自带的序列化。

web.xml 配置:

  1. <servlet>
  2.      <servlet-name>dubbo</servlet-name>
  3.      <servlet-class>com.alibaba.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class>
  4.      <load-on-startup>1</load-on-startup>
  5. </servlet>
  6. <servlet-mapping>
  7.      <servlet-name>dubbo</servlet-name>
  8.      <url-pattern>/*</url-pattern>
  9. </servlet-mapping>

注意：如果使用servlet派发请求
协议的端口必须与servlet容器的端口相同，
协议的上下文路径必须与servlet应用的上下文路径相同

4、redis 协议

基于 Redis实现的 RPC 协议。

注册 redis 服务的地址

可以通过脚本或监控中心手工填写表单注册redis服务的地址：

  1. RegistryFactory registryFactory = ExtensionLoader.getExtensionLoader(RegistryFactory.class).getAdaptiveExtension();
  2. Registry registry = registryFactory.getRegistry(URL.valueOf("zookeeper://10.20.153.10:2181"));
  3. registry.register(URL.valueOf("redis://10.20.153.11/com.foo.BarService?category=providers&dynamic=false&application=foo&group=member&loadbalance=consistenthash"));

在客户端引用

在客户端使用：

  1. <dubbo:reference id="store" 
  2.             interface="http://10.20.160.198/wiki/display/dubbo/java.util.Map" group="member" />

点对点直连：

  1. <dubbo:reference id="store"  interface="http://10.20.160.198/wiki/display/dubbo/java.util.Map" 
  2.     url="redis://10.20.153.10:6379" />

也可以使用自定义接口：

  1. <dubbo:reference id="store" interface="com.foo.StoreService" url="redis://10.20.153.10:6379" />

方法名建议和redis的标准方法名相同，即：get(key), set(key, value), delete(key)。

如果方法名和redis的标准方法名不相同，则需要配置映射关系：(其中”p:xxx”为spring的标准p标签)

  1. <dubbo:reference id="cache" interface="com.foo.CacheService" 
  2.             url="memcached://10.20.153.10:11211"
  3.              p:set="putFoo" p:get="getFoo" p:delete="removeFoo" />

5、thrift 协议

当前 dubbo 支持的 thrift 协议是对 thrift 原生协议的扩展，在原生协议的基础上添加了一些额外的头信息，比如 service name，magic number 等。

提示：2.3.0 以上版本支持

使用 dubbo thrift 协议同样需要使用 thrift 的 idl compiler 编译生成相应的 java 代码，后续版本中会在这方面做一些增强。

依赖：

  1. <dependency>
  2.     <groupId>org.apache.thrift</groupId>
  3.     <artifactId>libthrift</artifactId>
  4.     <version>0.8.0</version>
  5. </dependency>

配置：

所有服务共用一个端口：

  1. <dubbo:protocol name="thrift" port="3030" />

常见问题

  • Thrift 不支持 null 值，即：不能在协议中传递 null 值。

6、memcached 协议

基于 memcached实现的 RPC 协议。

提示：2.3.0 以上版本支持

注册 memcached 服务的地址

  1. RegistryFactory registryFactory = ExtensionLoader.getExtensionLoader(RegistryFactory.class).getAdaptiveExtension();
  2. Registry registry = registryFactory.getRegistry(URL.valueOf("zookeeper://10.20.153.10:2181"));
  3. registry.register(URL.valueOf("memcached://10.20.153.11/com.foo.BarService?category=providers&dynamic=false&application=foo&group=member&loadbalance=consistenthash"));

在客户端引用

在客户端使用 ：

  1. <dubbo:reference id="cache" interface="java.util.Map" group="member" />

点对点直连：

  1. <dubbo:reference id="cache" interface="java.util.Map" url="memcached://10.20.153.10:11211" />

也可以使用自定义接口：

  1. <dubbo:reference id="cache" interface="com.foo.CacheService" url="memcached://10.20.153.10:11211" />

方法名建议和 memcached 的标准方法名相同，即：get(key), set(key, value), delete(key)。

如果方法名和 memcached 的标准方法名不相同，则需要配置映射关系：

  1. <dubbo:reference id="cache" interface="com.foo.CacheService" url="memcached://10.20.153.10:11211" p:set="putFoo" p:get="getFoo" p:delete="removeFoo" />

7、rmi 协议

RMI 协议采用 JDK 标准的 java.rmi.* 实现，采用阻塞式短连接和 JDK 标准序列化方式。

注意：

如果正在使用 RMI 提供服务给外部访问(公司内网环境应该不会有攻击风险)，

同时应用里依赖了老的 common-collections 包(dubbo 不会依赖这个包，请排查自己的应用有没有使用)的情况下，存在反序列化安全风险(请检查应用：将 commons-collections3 请升级到 3.2.2；将 commons-collections4 请升级到 4.1。新版本的 commons-collections 解决了该问题 )。

特性

  • 连接个数：多连接
  • 连接方式：短连接
  • 传输协议：TCP
  • 传输方式：同步传输
  • 序列化：Java 标准二进制序列化
  • 适用范围：传入传出参数数据包大小混合，消费者与提供者个数差不多，可传文件。
  • 适用场景：常规远程服务方法调用，与原生RMI服务互操作

接口

如果服务接口继承了 java.rmi.Remote 接口，可以和原生 RMI 互操作，即：

  • 提供者用 Dubbo 的 RMI 协议暴露服务，消费者直接用标准 RMI 接口调用，
  • 或者提供方用标准 RMI 暴露服务，消费方用 Dubbo 的 RMI 协议调用。

如果服务接口没有继承 java.rmi.Remote 接口：

  • 缺省 Dubbo 将自动生成一个 com.xxx.XxxService$Remote 的接口，并继承 java.rmi.Remote 接口，并以此接口暴露服务，
  • 但如果设置了 <dubbo:protocol name="rmi" codec="spring" />，将不生成 $Remote 接口，而使用 Spring 的 RmiInvocationHandler 接口暴露服务，和 Spring 兼容。

配置

  1. <!-- 定义 RMI 协议： -->
  2. <dubbo:protocol name="rmi" port="1099" />
  4. <!--设置默认协议： -->
  5. <dubbo:provider protocol="rmi" />
  7. <!-- 设置服务协议： -->
  8. <dubbo:service protocol="rmi" />
  10. <!--多端口： -->
  11. <dubbo:protocol id="rmi1" name="rmi" port="1099" />
  12. <dubbo:protocol id="rmi2" name="rmi" port="2099" />
  13. <dubbo:service protocol="rmi1" />
  15. <!--Spring 兼容性：-->
  16. <dubbo:protocol name="rmi" codec="spring" />

8、webservice 协议

基于 WebService 的远程调用协议，基于 Apache CXF 1 的 frontend-simple 和 transports-http 实现。

提示：2.3.0 以上版本支持

可以和原生 WebService 服务互操作，即：

  • 提供者用 Dubbo 的 WebService 协议暴露服务，消费者直接用标准 WebService 接口调用，
  • 或者提供方用标准 WebService 暴露服务，消费方用 Dubbo 的 WebService 协议调用。

依赖

  1. <dependency>
  2.     <groupId>org.apache.cxf</groupId>
  3.     <artifactId>cxf-rt-frontend-simple</artifactId>
  4.     <version>2.6.1</version>
  5. </dependency>
  6. <dependency>
  7.     <groupId>org.apache.cxf</groupId>
  8.     <artifactId>cxf-rt-transports-http</artifactId>
  9.     <version>2.6.1</version>
  10. </dependency>

特性

  • 连接个数：多连接
  • 连接方式：短连接
  • 传输协议：HTTP
  • 传输方式：同步传输
  • 序列化：SOAP 文本序列化
  • 适用场景：系统集成，跨语言调用

1、基于CXF的 frontend-simple 和 transports-http 实现。
2、CXF是Apache开源的一个RPC框架：http://cxf.apache.org，由Xfire和Celtix合并而来 。

可以和原生WebService服务互操作，即：
提供者用Dubbo的WebService协议暴露服务，消费者直接用标准WebService接口调用，或者提供方用标准WebService暴露服务，消费方用Dubbo的WebService协议调用。

约束
参数及返回值需实现Serializable接口
参数尽量使用基本类型和POJO。

配置

配置协议：

  1. <!-- 配置协议： -->
  2. <dubbo:protocol name="webservice" port="8080" server="jetty" />
  4. <!-- 配置默认协议：-->
  5. <dubbo:provider protocol="webservice" />
  7. <!-- 配置服务协议：-->
  8. <dubbo:service protocol="webservice" />
  10. <!--多端口： -->
  11. <dubbo:protocol id="webservice1" name="webservice" port="8080" />
  12. <dubbo:protocol id="webservice2" name="webservice" port="8081" />
  14. <!-- 直连： -->
  15. <dubbo:reference id="helloService" interface="HelloWorld" url="webservice://10.20.153.10:8080/com.foo.HelloWorld" />
  17. <!-- WSDL -->
  18. http://10.20.153.10:8080/com.foo.HelloWorld?wsdl
  20. <!-- Jetty Server: (默认) -->
  21. <dubbo:protocol ... server="jetty" />
  23. <!-- Servlet Bridge Server: (推荐) -->
  24. <dubbo:protocol ... server="servlet" />

配置 DispatcherServlet：

  1. <servlet>
  2.      <servlet-name>dubbo</servlet-name>
  3.      <servlet-class>com.alibaba.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class>
  4.      <load-on-startup>1</load-on-startup>
  5. </servlet>
  6. <servlet-mapping>
  7.      <servlet-name>dubbo</servlet-name>
  8.      <url-pattern>/*</url-pattern>
  9. </servlet-mapping>

注意:如果使用servlet派发请求：
协议的端口必须与servlet容器的端口相同，
协议的上下文路径必须与servlet应用的上下文路径相同。

9、rest ( 就是 RestFull)

基于标准的Java REST API——JAX-RS 2.0（Java API for RESTful Web Services的简写）实现的REST调用支持

参考： http://dubbo.apache.org/zh-cn/docs/user/references/protocol/rest.html

二、多协议配置

Dubbo 允许配置多协议，在不同服务上支持不同协议或者同一服务上同时支持多种协议。

不同服务使用不同协议

不同服务在性能上适用不同协议进行传输，比如大数据用短连接协议，小数据大并发用长连接协议

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <beans xmlns="http://www.springframework.org/schema/beans"
  3.     xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4.     xmlns:dubbo="http://dubbo.apache.org/schema/dubbo"
  5.     xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.3.xsd http://dubbo.apache.org/schema/dubbo http://dubbo.apache.org/schema/dubbo/dubbo.xsd"> 
  7.     <dubbo:application name="world"  />
  8.     <dubbo:registry id="registry" address="10.20.141.150:9090" username="admin" password="hello1234" />
  10.     <!-- 多协议配置 -->
  11.     <dubbo:protocol name="dubbo" port="20880" />
  12.     <dubbo:protocol name="rmi" port="1099" />
  14.     <!-- 指定使用 dubbo协议 -->
  15.     <dubbo:service interface="com.alibaba.hello.api.HelloService" version="1.0.0" ref="helloService" protocol="dubbo" />
  17.     <!-- 指定使用 rmi协议 -->
  18.     <dubbo:service interface="com.alibaba.hello.api.DemoService" version="1.0.0" ref="demoService" protocol="rmi" /> 
  20. </beans>

同时使用多种协议

需要与 http 客户端互操作

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <beans xmlns="http://www.springframework.org/schema/beans"
  3.     xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4.     xmlns:dubbo="http://dubbo.apache.org/schema/dubbo"
  5.     xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.3.xsd http://dubbo.apache.org/schema/dubbo http://dubbo.apache.org/schema/dubbo/dubbo.xsd">
  7.     <dubbo:application name="world"  />
  8.     <dubbo:registry id="registry" address="10.20.141.150:9090" username="admin" password="hello1234" />
  10.     <!-- 多协议配置 -->
  11.     <dubbo:protocol name="dubbo" port="20880" />
  12.     <dubbo:protocol name="hessian" port="8080" />
  14.     <!-- 使用多个协议暴露服务 -->
  15.     <dubbo:service id="helloService" interface="com.alibaba.hello.api.HelloService" version="1.0.0" protocol="dubbo,hessian" />
  17. </beans>

三、面试题：

1、dubbo推荐用什么协议？

默认使用 dubbo 协议。

2、dubbo 默认使用什么序列化框架，你知道的还有哪些？

dubbo 有多种协议，不同的协议默认使用不同的序列化框架。比如：

dubbo 协议 默认使用 Hessian2 序列化。（说明：Hessian2 是阿里在 Hessian 基础上进行的二次开发，起名为Hessian2 ）
rmi协议 默认为 java 原生序列化，
http 协议 默认为 为 json 。

此外补充，
hessian 协议，默认是 hessian 序列化；
webservice 协议，默认是 soap 文本序列化 。

上面说的是 协议默认使用的序列化，也可以指定使用第三方的序列化框架，如 Kryo 、 FST等序列化框架，详情参考：
https://blog.csdn.net/xiaojin21cen/article/details/90269659
https://blog.csdn.net/xiaojin21cen/article/details/90269952
版权声明：本文为CSDN博主「xiaojin21cen」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/xiaojin21cen/article/details/79834222

发表评论

表情：
评论列表 （有 0 条评论，258人围观）

还没有评论，来说两句吧...

相关阅读