Dubbo源码学习--dubbo协议（二）

缺乏、安全感 2022-05-27 05:54 230阅读 0赞

Dubbo 缺省协议采用单一长连接和 NIO 异步通讯，适合于小数据量大并发的服务调用，以及服务消费者机器数远大于服务提供者机器数的情况。

反之，Dubbo 缺省协议不适合传送大数据量的服务，比如传文件，传视频等，除非请求量很低。

![70][]

*  Transporter: mina, netty, grizzy
 *  Serialization: dubbo, hessian2, java, json
 *  Dispatcher: all, direct, message, execution, connection
 *  ThreadPool: fixed, cached

## 特性 ##

缺省协议，使用基于 mina `1.1.7` 和 hessian `3.2.1` 的 tbremoting 交互。

*  连接个数：单连接
 *  连接方式：长连接
 *  传输协议：TCP
 *  传输方式：NIO 异步传输
 *  序列化：Hessian 二进制序列化
 *  适用范围：传入传出参数数据包较小（建议小于100K），消费者比提供者个数多，单一消费者无法压满提供者，尽量不要用 dubbo 协议传输大文件或超大字符串。
 *  适用场景：常规远程服务方法调用

## 约束 ##

*  参数及返回值需实现 `Serializable` 接口
 *  参数及返回值不能自定义实现 `List`, `Map`, `Number`, `Date`, `Calendar` 等接口，只能用 JDK 自带的实现，因为 hessian 会做特殊处理，自定义实现类中的属性值都会丢失。
 *  Hessian 序列化，只传成员属性值和值的类型，不传方法或静态变量，兼容情况 [1][][2][]：

<table style="border-spacing:0px;font-size:16px;margin-top:0px;margin-bottom:.85em;width:770px;color:rgb(51,51,51);font-family:'Helvetica Neue', Helvetica, Arial, sans-serif;letter-spacing:.2px;background-color:rgb(255,255,255);"> 
 <thead> 
  <tr style="border-top-color:rgb(204,204,204);"> 
   <th style="padding:6px 13px;">数据通讯</th> 
   <th style="padding:6px 13px;">情况</th> 
   <th style="padding:6px 13px;">结果</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr style="border-top-color:rgb(204,204,204);"> 
   <td style="padding:6px 13px;">A-&gt;B</td> 
   <td style="padding:6px 13px;">类A多一种 属性（或者说类B少一种 属性）</td> 
   <td style="padding:6px 13px;">不抛异常，A多的那 个属性的值，B没有， 其他正常</td> 
  </tr> 
  <tr style="background-color:rgb(248,248,248);border-top-color:rgb(204,204,204);"> 
   <td style="padding:6px 13px;">A-&gt;B</td> 
   <td style="padding:6px 13px;">枚举A多一种 枚举（或者说B少一种 枚举），A使用多 出来的枚举进行传输</td> 
   <td style="padding:6px 13px;">抛异常</td> 
  </tr> 
  <tr style="border-top-color:rgb(204,204,204);"> 
   <td style="padding:6px 13px;">A-&gt;B</td> 
   <td style="padding:6px 13px;">枚举A多一种 枚举（或者说B少一种 枚举），A不使用 多出来的枚举进行传输</td> 
   <td style="padding:6px 13px;">不抛异常，B正常接 收数据</td> 
  </tr> 
  <tr style="background-color:rgb(248,248,248);border-top-color:rgb(204,204,204);"> 
   <td style="padding:6px 13px;">A-&gt;B</td> 
   <td style="padding:6px 13px;">A和B的属性 名相同，但类型不相同</td> 
   <td style="padding:6px 13px;">抛异常</td> 
  </tr> 
  <tr style="border-top-color:rgb(204,204,204);"> 
   <td style="padding:6px 13px;">A-&gt;B</td> 
   <td style="padding:6px 13px;">serialId 不相同</td> 
   <td style="padding:6px 13px;">正常传输</td> 
  </tr> 
 </tbody> 
</table>

接口增加方法，对客户端无影响，如果该方法不是客户端需要的，客户端不需要重新部署。输入参数和结果集中增加属性，对客户端无影响，如果客户端并不需要新属性，不用重新部署。

输入参数和结果集属性名变化，对客户端序列化无影响，但是如果客户端不重新部署，不管输入还是输出，属性名变化的属性值是获取不到的。

总结：服务器端和客户端对领域对象并不需要完全一致，而是按照最大匹配原则。

## 配置 ##

配置协议：

<dubbo:protocol name="dubbo" port="20880" />

设置默认协议：

<dubbo:provider protocol="dubbo" />

设置服务协议：

<dubbo:service protocol="dubbo" />

多端口：

<dubbo:protocol id="dubbo1" name="dubbo" port="20880" />
    <dubbo:protocol id="dubbo2" name="dubbo" port="20881" />

配置协议选项：

<dubbo:protocol name=“dubbo” port=“9090” server=“netty” client=“netty” codec=“dubbo” serialization=“hessian2” charset=“UTF-8” threadpool=“fixed” threads=“100” queues=“0” iothreads=“9” buffer=“8192” accepts=“1000” payload=“8388608” />

多连接配置：

Dubbo 协议缺省每服务每提供者每消费者使用单一长连接，如果数据量较大，可以使用多个连接。

<dubbo:service connections="1"/>
    <dubbo:reference connections="1"/>

*  `<dubbo:service connections="0">` 或 `<dubbo:reference connections="0">` 表示该服务使用 JVM 共享长连接。缺省
 *  `<dubbo:service connections="1">` 或 `<dubbo:reference connections="1">` 表示该服务使用独立长连接。
 *  `<dubbo:service connections="2">` 或`<dubbo:reference connections="2">` 表示该服务使用独立两条长连接。

为防止被大量连接撑挂，可在服务提供方限制大接收连接数，以实现服务提供方自我保护。

<dubbo:protocol name="dubbo" accepts="1000" />

`dubbo.properties` 配置：

dubbo.service.protocol=dubbo

## 常见问题 ##

#### 为什么要消费者比提供者个数多? ####

因 dubbo 协议采用单一长连接，假设网络为千兆网卡 [3][]，根据测试经验数据每条连接最多只能压满 7MByte(不同的环境可能不一样，供参考)，理论上 1 个服务提供者需要 20 个服务消费者才能压满网卡。

#### 为什么不能传大包? ####

因 dubbo 协议采用单一长连接，如果每次请求的数据包大小为 500KByte，假设网络为千兆网卡 [3][]，每条连接最大 7MByte(不同的环境可能不一样，供参考)，单个服务提供者的 TPS(每秒处理事务数)最大为：128MByte / 500KByte = 262。单个消费者调用单个服务提供者的 TPS(每秒处理事务数)最大为：7MByte / 500KByte = 14。如果能接受，可以考虑使用，否则网络将成为瓶颈。

#### 为什么采用异步单一长连接? ####

因为服务的现状大都是服务提供者少，通常只有几台机器，而服务的消费者多，可能整个网站都在访问该服务，比如 Morgan 的提供者只有 6 台提供者，却有上百台消费者，每天有 1.5 亿次调用，如果采用常规的 hessian 服务，服务提供者很容易就被压跨，通过单一连接，保证单一消费者不会压死提供者，长连接，减少连接握手验证等，并使用异步 IO，复用线程池，防止 C10K 问题。

接下来我们看看在代码中Dubbo是如何实现的：

DubboProtocol主要提供了两个方法export和refer

(1)export方法中初始化了一个DubboExporter，是Dubbo协议对外提供服务的一个包装实现，其最终通过mina、netty或者grizzy来对外提供tcp服务

public <T> Exporter<T> export(Invoker<T> invoker) throws RpcException {
            URL url = invoker.getUrl();
    
            // export service.
            String key = serviceKey(url);
    		//创建Dubbo协议暴露的对象
            DubboExporter<T> exporter = new DubboExporter<T>(invoker, key, exporterMap);
            exporterMap.put(key, exporter);
    
            //export an stub service for dispatching event
            Boolean isStubSupportEvent = url.getParameter(Constants.STUB_EVENT_KEY, Constants.DEFAULT_STUB_EVENT);
            Boolean isCallbackservice = url.getParameter(Constants.IS_CALLBACK_SERVICE, false);
            if (isStubSupportEvent && !isCallbackservice) {
                String stubServiceMethods = url.getParameter(Constants.STUB_EVENT_METHODS_KEY);
                if (stubServiceMethods == null || stubServiceMethods.length() == 0) {
                    if (logger.isWarnEnabled()) {
                        logger.warn(new IllegalStateException("consumer [" + url.getParameter(Constants.INTERFACE_KEY) +
                                "], has set stubproxy support event ,but no stub methods founded."));
                    }
                } else {
                    stubServiceMethodsMap.put(url.getServiceKey(), stubServiceMethods);
                }
            }
    		//完成mina、netty或者grizzy实现的tcp服务
            openServer(url);
            optimizeSerialization(url);
            return exporter;
        }

(2)refer方法中初始化了一个DubboInvoker，是Dubbo协议连接服务提供者的一个代理实现，通过mina、netty或者grizzy来与服务提供中建立长连接来进行远程调用操作

public <T> Invoker<T> refer(Class<T> serviceType, URL url) throws RpcException {
            optimizeSerialization(url);
            // create rpc invoker.
    		//创建一个Dubbo协议远程调用的代理类，通过mina、netty或grizzy与服务提供者建立连接调用服务
            DubboInvoker<T> invoker = new DubboInvoker<T>(serviceType, url, getClients(url), invokers);
            invokers.add(invoker);
            return invoker;
        }

服务消费方发起远程调用的底层通信

![Center][]

服务提供方接收请求并响应的底层通信

![Center 1][]

引用：https://blog.csdn.net/quhongwei\_zhanqiu/article/details/41702235

[70]: /images/20220527/dd54938e908e4de9ac20b553e404f03c.png
[1]: http://dubbo.apache.org/books/dubbo-user-book/references/protocol/dubbo.html#fn_1
[2]: http://dubbo.apache.org/books/dubbo-user-book/references/protocol/dubbo.html#fn_2
[3]: http://dubbo.apache.org/books/dubbo-user-book/references/protocol/dubbo.html#fn_3
[Center]: /images/20220527/9e15533d28474681b93acc1c0a99f81d.png
[Center 1]: /images/20220527/fae934bf6daf46f2a2270f5c2c6515ac.png