Nginx 一个牛X的功能，流量拷贝！

绝地灬酷狼 2021-08-28 14:11 328阅读 0赞

点击上方 [Java后端][Java]，选择 设为星标

优质文章，及时送达

--------------------

**1、需求**

将生产环境的流量拷贝到预上线环境或测试环境，这样做有很多好处，比如：

*  可以验证功能是否正常，以及服务的性能；
 *  用真实有效的流量请求去验证，又不用造数据，不影响线上正常访问；
 *  这跟灰度发布还不太一样，镜像流量不会影响真实流量；
 *  可以用来排查线上问题；
 *  重构，假如服务做了重构，这也是一种测试方式；

为了实现流量拷贝，Nginx提供了ngx\_http\_mirror\_module模块

### **2、安装Nginx** ###

首页，设置yum仓库。为此，创建一个文件/etc/yum.repos.d/nginx.repo

将以下内容写入文件

[nginx-stable]
    name=nginx stable repo
    baseurl=http://nginx.org/packages/centos/$releasever/$basearch/
    gpgcheck=1
    enabled=1
    gpgkey=https://nginx.org/keys/nginx_signing.key
    module_hotfixes=true
    
    [nginx-mainline]
    name=nginx mainline repo
    baseurl=http://nginx.org/packages/mainline/centos/$releasever/$basearch/
    gpgcheck=1
    enabled=0
    gpgkey=https://nginx.org/keys/nginx_signing.key
    module_hotfixes=true

yum安装nginx

yum install nginx

默认情况下，nginx配置文件是nginx.conf

一般情况下，nginx.conf文件在 /usr/local/nginx/conf 或者 /etc/nginx 或者 /usr/local/etc/nginx 目录下。关于 Windows 环境下的安装很简单，更多 Nginx 相关博文，可以在公众号 Java后端 回复「666」获取。

为了启动nginx，直接在命令行里输入nginx回车即可

# 启动nginx
    nginx
    # fast shutdown
    nginx -s stop
    # graceful shutdown
    nginx -s quit
    # reloading the configuration file
    nginx -s reload
    # reopening the log files
    nginx -s reopen
    # list of all running nginx processes
    ps -ax | grep nginx

![format_png][]

![format_png 1][]

一旦master进程接收到重新加载配置的信号，它将检查新配置文件的语法是否正确，并尝试应用其中提供的配置。如果成功，master进程将启动新的worker进程，并发送消息给旧的worker进程，要求他们shutdown。

否则，master进程将回滚所做的更改，并继续使用旧配置。旧的worker进程在接收到关闭命令后，停止接受新的连接，直到所有之前已经接受的连接全部处理完为止。之后，旧的worker进程退出。

nginx的master进程的进程ID，默认情况下，放在nginx.pid文件中，该文件所在的目录一般是/usr/local/nginx/logs 或者 /var/run

还可以这样停止nginx

kill -s QUIT 3997

初始配置文件长这样：

user  nginx;
    worker_processes  1;
    
    error_log  /var/log/nginx/error.log warn;
    pid        /var/run/nginx.pid;
    
    
    events {
        worker_connections  1024;
    }
    
    
    http {
        include       /etc/nginx/mime.types;
        default_type  application/octet-stream;
    
        log_format  main '$remote_addr - $remote_user [$time_local] "$request" '
                          '$status $body_bytes_sent "$http_referer" '
                          '"$http_user_agent" "$http_x_forwarded_for"';
    
        access_log  /var/log/nginx/access.log main;
    
        sendfile        on;
        #tcp_nopush on;
    
        keepalive_timeout  65;
    
        #gzip on;
    
        include /etc/nginx/conf.d/*.conf;
    }

**3、ngx\_http\_mirror\_module**

> The ngx\_http\_mirror\_module module (1.13.4) implements mirroring of an original request by creating background mirror subrequests. Responses to mirror subrequests are ignored.

我是这样理解的，这里，mirror本意是镜子、镜像，这里可以理解就像一个镜像站点一样，将所有的请求都收集起来，这个镜像就代表了所有真实有效的原始请求。有了这个镜像，后续我们才可能用这个镜像去做一些事情，比如重现一下所有的请求，这就实现了把线上的流程复制到别的地方。

官网给出的示例倒是很简单，如下：

location / {
        mirror /mirror;
        proxy_pass http://backend;
    }
    
    location = /mirror {
        internal;
        proxy_pass http://test_backend$request_uri;
    }

如果请求体被镜像，那么在创建子请求之前会先读取请求体

location / {
        mirror /mirror;
        mirror_request_body off;
        proxy_pass http://backend;
    }
    
    location = /mirror {
        internal;
        proxy_pass http://log_backend;
        proxy_pass_request_body off;
        proxy_set_header Content-Length "";
        proxy_set_header X-Original-URI $request_uri;
    }

前面我们安装了Nginx，但是里面没有包含我们所需的ngx\_http\_mirror\_module模块，因此，真正要使用的时候最好还是采用自定义安装，即从源码构建

首先，下载源码 http://nginx.org/en/download.html

接下来，编译安装，例如：

./configure
        --sbin-path=/usr/local/nginx/nginx
        --conf-path=/usr/local/nginx/nginx.conf
        --pid-path=/usr/local/nginx/nginx.pid
        --with-http_ssl_module
        --without-http_limit_req_module
        --without-http_mirror_module
        --with-pcre=../pcre-8.43
        --with-zlib=../zlib-1.2.11
        --add-module=/path/to/ngx_devel_kit
        --add-module=/path/to/lua-nginx-module
    
    make & make install

配置

upstream api.abc.com {
        server 127.0.0.1:8080;
    }
    
    upstream tapi.abc.com {
        server 127.0.0.1:8081;
    }
    
    server {
        listen 80;
       # 源站点
        location /api {
            proxy_pass http://api.cjs.com;
            proxy_set_header Host $host;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    
            # 流量复制
        mirror /newapi;
        mirror /mirror2;
        mirror /mirror3;
    
        # 复制请求体
        mirror_request_body on;
        }
    
        # 镜像站点
        location /tapi {
            proxy_pass http://tapi.cjs.com$request_uri;
            proxy_pass_request_body on;
            proxy_set_header Host $host;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        }
    }

### **4、文档** ###

Nginx文档

> http://nginx.org/en/docs/  
> http://nginx.org/en/docs/http/ngx\_http\_mirror\_module.html  
> http://nginx.org/en/docs/beginners\_guide.html  
> http://nginx.org/en/docs/http/ngx\_http\_core\_module.html\#location  
> http://nginx.org/en/docs/configure.html

第三方模板

> http://luajit.org/  
> https://www.nginx.com/resources/wiki/  
> https://www.nginx.com/resources/wiki/modules/lua/  
> https://www.nginx.com/resources/wiki/modules/index.html  
> https://github.com/openresty/lua-nginx-module

补充

转自：废物大师兄

https://www.cnblogs.com/cjsblog/p/12163207.html

--------------------

\-END-

如果看到这里，说明你喜欢这篇文章，请**转发****、点赞**。同时标星（置顶）本公众号可以第一时间接受到博文推送。

**推****荐****阅****读**

***1. ***[面试官让我把源码捋一遍][Link 1]

***2. ***[Java如何优雅的实现时间控制][Java 1]

***3.*** [Spring&nbsp;Boot项目优化][Spring_nbsp_Boot]

***4. ***[Spring Boot 三招组合拳][Spring_Boot]

![format_png 2][]

[Java]: https://blog.csdn.net/qq_37217713/article/details/101445094
[format_png]: /images/20210730/5b885899ce3a4d39886a3c033a602dea.png
[format_png 1]: /images/20210730/613ecbb264464d22ab6bded96fbc7795.png
[Link 1]: https://blog.csdn.net/qq_37217713/article/details/105445774
[Java 1]: https://blog.csdn.net/qq_37217713/article/details/105445773
[Spring_nbsp_Boot]: http://mp.weixin.qq.com/s?__biz=Mzg2MjEwMjI1Mg%3D%3D&chksm=ce0e5352f979da44680e98220f60b10ea4a9981c62d22d40aeb15608cccfff0d77cd0d60e7b0&idx=4&mid=2247492817&scene=21&sn=b60419b5547f1e6199cacc92dd04dc3f#wechat_redirect
[Spring_Boot]: http://mp.weixin.qq.com/s?__biz=Mzg2MjEwMjI1Mg%3D%3D&chksm=ce0e533cf979da2a28de0b31aa969c1f2619ac6f98e35fa7d0f6d278ff3c9074e877d457c991&idx=1&mid=2247492799&scene=21&sn=2e8d6b0cf288aad8c2ff0a2a72e62e8c#wechat_redirect
[format_png 2]: /images/20210730/d988fac5f4ca4a1fa3c315a6d13173a2.png