Dubbo支持的协议 柔情只为你懂 2022-09-09 00:09 156阅读 0赞 **Dubbo支持dubbo、rmi、hessian、http、webservice、thrift、redis等多种协议,但是Dubbo官网是推荐我们使用Dubbo协议的**。 # 一、Dubbo支持的协议 # 下面我们就针对Dubbo的每种协议详解讲解,以便我们在实际应用中能够正确取舍。 ## 1、dubbo 协议 (默认) ## > 1、dubbo 缺省协议 采用单一长连接和NIO异步通讯,适合于小数据量大并发的服务调用,以及服务消费者机器数远大于服务提供者机器数的情况 > 2、**不适合传送大数据量的服务**,比如传文件,传视频等,除非请求量很低。 **缺省协议,使用基于mina1.1.7+hessian3.2.1的tbremoting交互。** **特性:** 连接个数:单连接 连接方式:长连接 传输协议:TCP 传输方式:NIO异步传输 序列化:**Hessian 二进制序列化** 适用范围:传入传出参数数据包较小(建议小于100K),消费者比提供者个数多,单一消费者无法压满提供者,尽量不要用dubbo协议传输大文件或超大字符串。 适用场景:常规远程服务方法调用 **配置:** <!--配置协议: --> <dubbo:protocol name="dubbo" port="20880" /> <!--设置默认协议:--> <dubbo:provider protocol="dubbo" /> <!--设置某个服务的协议:--> <dubbo:service interface="..." protocol="dubbo" /> <!--多端口:--> <dubbo:protocol id="dubbo1" name="dubbo" port="20880" /> <dubbo:protocol id="dubbo2" name="dubbo" port="20881" /> <!--配置协议选项:--> <dubbo:protocol name=“dubbo” port=“9090” server=“netty” client=“netty” codec=“dubbo” serialization=“hessian2” charset=“UTF-8” threadpool=“fixed” threads=“100” queues=“0” iothreads=“9” buffer=“8192” accepts=“1000” payload=“8388608” /> Dubbo协议缺省每服务每提供者每消费者使用单一长连接,如果数据量较大,可以使用多个连接。 <dubbo:protocol name="dubbo" connections="2" /> * <dubbo:service connections=”0”>或<dubbo:reference connections=”0”>表示该服务使用JVM共享长连接。(缺省) * <dubbo:service connections=”1”>或<dubbo:reference connections=”1”>表示该服务使用独立长连接。 * <dubbo:service connections=”2”>或<dubbo:reference connections=”2”>表示该服务使用独立两条长连接。 为防止被大量连接撑挂,可在服务提供方限制大接收连接数,以实现服务提供方自我保护 <dubbo:protocol name="dubbo" accepts="1000" /> **常见问题[ ][Link 1]** **为什么要消费者比提供者个数多?** 因 dubbo 协议采用单一长连接,假设网络为千兆网卡 [3][],根据测试经验数据每条连接最多只能压满 7MByte(不同的环境可能不一样,供参考),理论上 1 个服务提供者需要 20 个服务消费者才能压满网卡。 **为什么不能传大包?** 因 dubbo 协议采用单一长连接,如果每次请求的数据包大小为 500KByte,假设网络为千兆网卡 [3][],每条连接最大 7MByte(不同的环境可能不一样,供参考),单个服务提供者的 TPS(每秒处理事务数)最大为:128MByte / 500KByte = 262。单个消费者调用单个服务提供者的 TPS(每秒处理事务数)最大为:7MByte / 500KByte = 14。如果能接受,可以考虑使用,否则网络将成为瓶颈。 **为什么采用异步单一长连接?** 因为服务的现状大都是服务提供者少,通常只有几台机器,而服务的消费者多,可能整个网站都在访问该服务,比如 Morgan 的提供者只有 6 台提供者,却有上百台消费者,每天有 1.5 亿次调用,如果采用常规的 hessian 服务,服务提供者很容易就被压跨,通过单一连接,保证单一消费者不会压死提供者,长连接,减少连接握手验证等,并使用异步 IO,复用线程池,防止 C10K 问题。 ## 2、http 协议 ## 基于 HTTP 表单的远程调用协议,采用 Spring 的 HttpInvoker 实现 > **提示:**`2.3.0` 以上版本支持 **特性** * 连接个数:多连接 * 连接方式:短连接 * 传输协议:HTTP * 传输方式:同步传输 * 序列化:表单序列化 * 适用范围:传入传出参数数据包大小混合,提供者比消费者个数多,可用浏览器查看,可用表单或URL传入参数,暂不支持传文件。 * 适用场景:需同时给应用程序和浏览器 JS 使用的服务。 **配置:** <!-- 配置协议:--> <dubbo:protocol name="http" port="8080" /> <!-- 配置 Jetty Server (默认):--> <dubbo:protocol ... server="jetty" /> <!-- 配置 Servlet Bridge Server (推荐使用): --> <dubbo:protocol ... server="servlet" /> **配置 DispatcherServlet:** <servlet> <servlet-name>dubbo</servlet-name> <servlet-class>org.apache.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class> <load-on-startup>1</load-on-startup> </servlet> <servlet-mapping> <servlet-name>dubbo</servlet-name> <url-pattern>/*</url-pattern> </servlet-mapping> 注意,如果使用 servlet 派发请求: * 协议的端口 `<dubbo:protocol port="8080" />` 必须与 servlet 容器的端口相同, * 协议的上下文路径 `<dubbo:protocol contextpath="foo" />` 必须与 servlet 应用的上下文路径相同。 * ## 3、hessian 协议 ## Hessian 协议用于集成 Hessian 的服务,Hessian 底层采用 Http 通讯,采用 Servlet 暴露服务,Dubbo 缺省内嵌 Jetty 作为服务器实现。 Dubbo 的 Hessian 协议可以和原生 Hessian 服务互操作,即: 提供者用 Dubbo 的 Hessian 协议暴露服务,消费者直接用标准 Hessian 接口调用 或者提供方用标准 Hessian 暴露服务,消费方用 Dubbo 的 Hessian 协议调用。 Hessian 是 Caucho 开源的一个 RPC 框架,其通讯效率高于 WebService 和 Java 自带的序列化。 **特性:** 连接个数:多连接 连接方式:短连接 传输协议:HTTP 传输方式:同步传输 序列化:**Hessian二进制序列化** 适用范围:传入传出参数数据包较大,提供者比消费者个数多,提供者压力较大,可传文件。 适用场景:页面传输,文件传输,或与原生hessian服务互操作 **依赖:** <dependency> <groupId>com.caucho</groupId> <artifactId>hessian</artifactId> <version>4.0.7</version> </dependency> **配置:** <!-- 定义 hessian 协议: --> <dubbo:protocol name="hessian" port="8080" server="jetty" /> <!--设置默认协议: --> <dubbo:provider protocol="hessian" /> <!-- 设置 service 协议: --> <dubbo:service protocol="hessian" /> <!-- 多端口:--> <dubbo:protocol id="hessian1" name="hessian" port="8080" /> <dubbo:protocol id="hessian2" name="hessian" port="8081" /> <!--直连:--> <dubbo:reference id="helloService" interface="HelloWorld" url="hessian://10.20.153.10:8080/helloWorld" /> [Hessian][] 是 Caucho 开源的一个 RPC 框架,其通讯效率高于 WebService 和 Java 自带的序列化。 **web.xml 配置:** <servlet> <servlet-name>dubbo</servlet-name> <servlet-class>com.alibaba.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class> <load-on-startup>1</load-on-startup> </servlet> <servlet-mapping> <servlet-name>dubbo</servlet-name> <url-pattern>/*</url-pattern> </servlet-mapping> > **注意:如果使用servlet派发请求** > 协议的端口<dubbo:protocol port="8080" />必须与servlet容器的端口相同, > 协议的上下文路径<dubbo:protocol contextpath="foo" />必须与servlet应用的上下文路径相同 ## 4、redis 协议 ## 基于 Redis实现的 RPC 协议。 **注册 redis 服务的地址** 可以通过脚本或监控中心手工填写表单注册redis服务的地址: RegistryFactory registryFactory = ExtensionLoader.getExtensionLoader(RegistryFactory.class).getAdaptiveExtension(); Registry registry = registryFactory.getRegistry(URL.valueOf("zookeeper://10.20.153.10:2181")); registry.register(URL.valueOf("redis://10.20.153.11/com.foo.BarService?category=providers&dynamic=false&application=foo&group=member&loadbalance=consistenthash")); **在客户端引用** **在客户端使用:** <dubbo:reference id="store" interface="http://10.20.160.198/wiki/display/dubbo/java.util.Map" group="member" /> **点对点直连:** <dubbo:reference id="store" interface="http://10.20.160.198/wiki/display/dubbo/java.util.Map" url="redis://10.20.153.10:6379" /> **也可以使用自定义接口:** <dubbo:reference id="store" interface="com.foo.StoreService" url="redis://10.20.153.10:6379" /> 方法名建议和redis的标准方法名相同,即:get(key), set(key, value), delete(key)。 如果方法名和redis的标准方法名不相同,则需要配置映射关系:(其中”p:xxx”为spring的标准p标签) <dubbo:reference id="cache" interface="com.foo.CacheService" url="memcached://10.20.153.10:11211" p:set="putFoo" p:get="getFoo" p:delete="removeFoo" /> ## 5、thrift 协议 ## 当前 dubbo 支持的 thrift 协议是对 thrift 原生协议的扩展,在原生协议的基础上添加了一些额外的头信息,比如 service name,magic number 等。 提示:`2.3.0` 以上版本支持 使用 dubbo thrift 协议同样需要使用 thrift 的 idl compiler 编译生成相应的 java 代码,后续版本中会在这方面做一些增强。 **依赖:** <dependency> <groupId>org.apache.thrift</groupId> <artifactId>libthrift</artifactId> <version>0.8.0</version> </dependency> **配置:** 所有服务共用一个端口: <dubbo:protocol name="thrift" port="3030" /> **常见问题** * Thrift 不支持 null 值,即:不能在协议中传递 null 值。 ## 6、memcached 协议 ## 基于 memcached实现的 RPC 协议。 **提示:**`2.3.0` 以上版本支持 **注册 memcached 服务的地址** RegistryFactory registryFactory = ExtensionLoader.getExtensionLoader(RegistryFactory.class).getAdaptiveExtension(); Registry registry = registryFactory.getRegistry(URL.valueOf("zookeeper://10.20.153.10:2181")); registry.register(URL.valueOf("memcached://10.20.153.11/com.foo.BarService?category=providers&dynamic=false&application=foo&group=member&loadbalance=consistenthash")); **在客户端引用** **在客户端使用 :** <dubbo:reference id="cache" interface="java.util.Map" group="member" /> **点对点直连:** <dubbo:reference id="cache" interface="java.util.Map" url="memcached://10.20.153.10:11211" /> **也可以使用自定义接口:** <dubbo:reference id="cache" interface="com.foo.CacheService" url="memcached://10.20.153.10:11211" /> 方法名建议和 memcached 的标准方法名相同,即:get(key), set(key, value), delete(key)。 如果方法名和 memcached 的标准方法名不相同,则需要配置映射关系: <dubbo:reference id="cache" interface="com.foo.CacheService" url="memcached://10.20.153.10:11211" p:set="putFoo" p:get="getFoo" p:delete="removeFoo" /> ## 7、rmi 协议 ## RMI 协议采用 JDK 标准的 **`java.rmi.*` **实现,采用阻塞式短连接和 JDK 标准序列化方式。 **注意:** 如果正在使用 RMI 提供服务给外部访问(公司内网环境应该不会有攻击风险), 同时应用里依赖了老的 common-collections 包(dubbo 不会依赖这个包,请排查自己的应用有没有使用)的情况下,存在反序列化安全风险(请检查应用:将 commons-collections3 请升级到 [3.2.2][];将 commons-collections4 请升级到 [4.1][]。新版本的 commons-collections 解决了该问题 )。 **特性** * 连接个数:多连接 * 连接方式:短连接 * 传输协议:TCP * 传输方式:同步传输 * 序列化:**Java 标准二进制序列化** * 适用范围:传入传出参数数据包大小混合,消费者与提供者个数差不多,可传文件。 * 适用场景:常规远程服务方法调用,与原生RMI服务互操作 **接口** 如果服务接口继承了 `java.rmi.Remote` 接口,可以和原生 RMI 互操作,即: * 提供者用 Dubbo 的 RMI 协议暴露服务,消费者直接用标准 RMI 接口调用, * 或者提供方用标准 RMI 暴露服务,消费方用 Dubbo 的 RMI 协议调用。 如果服务接口没有继承 `java.rmi.Remote` 接口: * 缺省 Dubbo 将自动生成一个 `com.xxx.XxxService$Remote` 的接口,并继承 `java.rmi.Remote` 接口,并以此接口暴露服务, * 但如果设置了 `<dubbo:protocol name="rmi" codec="spring" />`,将不生成 `$Remote` 接口,而使用 Spring 的 `RmiInvocationHandler` 接口暴露服务,和 Spring 兼容。 **配置** <!-- 定义 RMI 协议: --> <dubbo:protocol name="rmi" port="1099" /> <!--设置默认协议: --> <dubbo:provider protocol="rmi" /> <!-- 设置服务协议: --> <dubbo:service protocol="rmi" /> <!--多端口: --> <dubbo:protocol id="rmi1" name="rmi" port="1099" /> <dubbo:protocol id="rmi2" name="rmi" port="2099" /> <dubbo:service protocol="rmi1" /> <!--Spring 兼容性:--> <dubbo:protocol name="rmi" codec="spring" /> ## 8、webservice 协议 ## 基于 WebService 的远程调用协议,基于 [Apache CXF][] [1][] 的 `frontend-simple` 和 `transports-http` 实现。 **提示:**`2.3.0` 以上版本支持 可以和原生 WebService 服务互操作,即: * 提供者用 Dubbo 的 WebService 协议暴露服务,消费者直接用标准 WebService 接口调用, * 或者提供方用标准 WebService 暴露服务,消费方用 Dubbo 的 WebService 协议调用。 **依赖** <dependency> <groupId>org.apache.cxf</groupId> <artifactId>cxf-rt-frontend-simple</artifactId> <version>2.6.1</version> </dependency> <dependency> <groupId>org.apache.cxf</groupId> <artifactId>cxf-rt-transports-http</artifactId> <version>2.6.1</version> </dependency> **特性** * 连接个数:多连接 * 连接方式:短连接 * 传输协议:HTTP * 传输方式:同步传输 * 序列化:SOAP 文本序列化 * 适用场景:系统集成,跨语言调用 1、基于CXF的 frontend-simple 和 transports-http 实现。 2、CXF是Apache开源的一个RPC框架:http://cxf.apache.org,由Xfire和Celtix合并而来 。 可以和原生WebService服务互操作,即: 提供者用Dubbo的WebService协议暴露服务,消费者直接用标准WebService接口调用,或者提供方用标准WebService暴露服务,消费方用Dubbo的WebService协议调用。 约束 参数及返回值需实现Serializable接口 参数尽量使用基本类型和POJO。 **配置** 配置协议: <!-- 配置协议: --> <dubbo:protocol name="webservice" port="8080" server="jetty" /> <!-- 配置默认协议:--> <dubbo:provider protocol="webservice" /> <!-- 配置服务协议:--> <dubbo:service protocol="webservice" /> <!--多端口: --> <dubbo:protocol id="webservice1" name="webservice" port="8080" /> <dubbo:protocol id="webservice2" name="webservice" port="8081" /> <!-- 直连: --> <dubbo:reference id="helloService" interface="HelloWorld" url="webservice://10.20.153.10:8080/com.foo.HelloWorld" /> <!-- WSDL --> http://10.20.153.10:8080/com.foo.HelloWorld?wsdl <!-- Jetty Server: (默认) --> <dubbo:protocol ... server="jetty" /> <!-- Servlet Bridge Server: (推荐) --> <dubbo:protocol ... server="servlet" /> **配置 DispatcherServlet:** <servlet> <servlet-name>dubbo</servlet-name> <servlet-class>com.alibaba.dubbo.remoting.http.servlet.DispatcherServlet</servlet-class> <load-on-startup>1</load-on-startup> </servlet> <servlet-mapping> <servlet-name>dubbo</servlet-name> <url-pattern>/*</url-pattern> </servlet-mapping> 注意:如果使用servlet派发请求: 协议的端口<dubbo:protocol port=“8080” />必须与servlet容器的端口相同, 协议的上下文路径<dubbo:protocol contextpath=“foo” />必须与servlet应用的上下文路径相同。 ## 9、rest ( 就是 RestFull) ## 基于标准的Java REST API——JAX-RS 2.0(Java API for RESTful Web Services的简写)实现的REST调用支持 参考: http://dubbo.apache.org/zh-cn/docs/user/references/protocol/rest.html # 二、多协议配置 # Dubbo 允许配置多协议,在不同服务上支持不同协议或者同一服务上同时支持多种协议。 ### **不同服务使用不同协议** ### 不同服务在性能上适用不同协议进行传输,比如大数据用短连接协议,小数据大并发用长连接协议 <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:dubbo="http://dubbo.apache.org/schema/dubbo" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.3.xsd http://dubbo.apache.org/schema/dubbo http://dubbo.apache.org/schema/dubbo/dubbo.xsd"> <dubbo:application name="world" /> <dubbo:registry id="registry" address="10.20.141.150:9090" username="admin" password="hello1234" /> <!-- 多协议配置 --> <dubbo:protocol name="dubbo" port="20880" /> <dubbo:protocol name="rmi" port="1099" /> <!-- 指定使用 dubbo协议 --> <dubbo:service interface="com.alibaba.hello.api.HelloService" version="1.0.0" ref="helloService" protocol="dubbo" /> <!-- 指定使用 rmi协议 --> <dubbo:service interface="com.alibaba.hello.api.DemoService" version="1.0.0" ref="demoService" protocol="rmi" /> </beans> ### **同时使用多种协议** ### 需要与 http 客户端互操作 <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:dubbo="http://dubbo.apache.org/schema/dubbo" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.3.xsd http://dubbo.apache.org/schema/dubbo http://dubbo.apache.org/schema/dubbo/dubbo.xsd"> <dubbo:application name="world" /> <dubbo:registry id="registry" address="10.20.141.150:9090" username="admin" password="hello1234" /> <!-- 多协议配置 --> <dubbo:protocol name="dubbo" port="20880" /> <dubbo:protocol name="hessian" port="8080" /> <!-- 使用多个协议暴露服务 --> <dubbo:service id="helloService" interface="com.alibaba.hello.api.HelloService" version="1.0.0" protocol="dubbo,hessian" /> </beans> # 三、面试题: # ## **1、dubbo推荐用什么协议?** ## 默认使用 dubbo 协议。 ## **2、dubbo 默认使用什么序列化框架,你知道的还有哪些?** ## dubbo 有多种协议,不同的协议默认使用不同的序列化框架。比如: dubbo 协议 默认使用 Hessian2 序列化。(说明:Hessian2 是阿里在 Hessian 基础上进行的二次开发,起名为Hessian2 ) rmi协议 默认为 java 原生序列化, http 协议 默认为 为 json 。 此外补充, hessian 协议,默认是 hessian 序列化; webservice 协议,默认是 soap 文本序列化 。 上面说的是 协议默认使用的序列化,也可以指定使用第三方的序列化框架,如 Kryo 、 FST等序列化框架,详情参考: https://blog.csdn.net/xiaojin21cen/article/details/90269659 https://blog.csdn.net/xiaojin21cen/article/details/90269952 版权声明:本文为CSDN博主「xiaojin21cen」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。 原文链接:https://blog.csdn.net/xiaojin21cen/article/details/79834222 [Link 1]: https://dubbo.apache.org/zh/docs/references/protocols/dubbo/#%E5%B8%B8%E8%A7%81%E9%97%AE%E9%A2%98 [3]: https://dubbo.apache.org/zh/docs/references/protocols/dubbo/#fn:3 [Hessian]: http://hessian.caucho.com/ [3.2.2]: https://commons.apache.org/proper/commons-collections/release_3_2_2.html [4.1]: https://commons.apache.org/proper/commons-collections/release_4_1.html [Apache CXF]: http://cxf.apache.org/ [1]: https://dubbo.apache.org/zh/docs/references/protocols/webservice/#fn:1
还没有评论,来说两句吧...