DR模式搭建及keepalived+LVS搭建

旧城等待， 2022-05-19 23:21 211阅读 0赞

# 1.DR模式搭建 #

准备三台机器：

dir设置的外网IP为192.168.30.128；

rs1设置的外网IP为192.168.30.129；

rs2设置的外网IP为192.168.30.130；

VIP的外网IP为192.168.30.200。

DR模式也需要在dir上编写一个shell脚本，并执行；

[root@yuioplvlinux-128 ~]# vim /usr/local/sbin/lvs_dr.sh
    #! /bin/bash
    echo 1 > /proc/sys/net/ipv4/ip_forward
    ipv=/usr/sbin/ipvsadm
    vip=192.168.30.200
    rs1=192.168.30.129
    rs2=192.168.30.130
    #注意这里的网卡名字
    ifdown ens33
    ifup ens33
    ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
    route add -host $vip dev ens33:2
    $ipv -C
    $ipv -A -t $vip:80 -s wrr
    $ipv -a -t $vip:80 -r $rs1:80 -g -w 1
    $ipv -a -t $vip:80 -r $rs2:80 -g -w 1
    
    [root@yuioplvlinux-128 ~]# sh /usr/local/sbin/lvs_dr.sh
    成功断开设备 'ens33'。
    连接已成功激活（D-Bus 活动路径：/org/freedesktop/NetworkManager/ActiveConnection/235）

两台rs上也需要编写脚本（内容一样），并编写；

[root@yuioplvlinux-129 ~]# vi /usr/local/sbin/lvs_rs.sh
    #/bin/bash
    vip=192.168.30.200
    #把vip绑定在lo上，是为了实现rs直接把结果返回给客户端
    ifdown lo
    ifup lo
    ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
    route add -host $vip lo:0
    #以下操作为更改arp内核参数，目的是为了让rs顺利发送mac地址给客户端
    #参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
    echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
    echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
    echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
    echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
    [root@yuioplvlinux-129 ~]# sh /usr/local/sbin/lvs_rs.sh

执行完三个脚本后，就可以测试了。但是不能dir上用curl命令测试了，因为VIP在三台机器上都有设置，直接curl去访问VIP的话不可能成功。所以只能用浏览器来测试，在浏览器上访问VIP地址-192.168.30.200，多刷新几次，就可以看到效果。

![70][] ![70 1][]

# 2.keepalived+LVS #

LVS架构中，不管是NAT模式还是DR模式，当后端的rs宕掉时，调度器还是会把请求转发到宕掉的rs上去，这样的结果并不是我们所期待的，而keepalived就可以解决这个问题。keepalived不仅仅有高可用的功能，还有负载均衡的功能。在调度器只有安装了keepalived，就不用再去安装ipvsadm了，也不用去编写LVS相关的脚本了，也就是说keepalived已经嵌入了LVS功能。完整的keepalived+LVS架构需要有两台调度器实现高可用，提供调度服务的只需要一台，另外一台作为备用。

为了节省资源，只设置了一台主keepalived，备用的就暂时忽略。

准备三台机器：

dir设置的外网IP为192.168.30.128；

rs1设置的外网IP为192.168.30.129；

rs2设置的外网IP为192.168.30.130；

VIP的外网IP为192.168.30.200。

由于在上面刚刚执行过LVS，所以使用命令“ipvsadm -C”清除之前设置的ipvsadm规则；

在dir编辑keepalived的配置文件；

[root@yuioplvlinux-128 ~]# vim /etc/keepalived/keepalived.conf
    vrrp_instance VI_1 {
        #备用服务器上为 BACKUP
        state MASTER
        #绑定vip的网卡为ens33，你的网卡和阿铭的可能不一样，这里需要你改一下
        interface ens33
        virtual_router_id 51
        #备用服务器上为90
        priority 100
        advert_int 1
        authentication {
            auth_type PASS
            auth_pass aminglinux
        }
        virtual_ipaddress {
            192.168.30.200
        }
    }
    virtual_server 192.168.30.200 80 {
        #(每隔10秒查询realserver状态)
        delay_loop 10
        #(lvs 算法)
        lb_algo wlc
        #(DR模式)
        lb_kind DR
        #(同一IP的连接60秒内被分配到同一台realserver)
        persistence_timeout 60
        #(用TCP协议检查realserver状态)
        protocol TCP
    
        real_server 192.168.30.129 80 {
            #(权重)
            weight 100
            TCP_CHECK {
            #(10秒无响应超时)
            connect_timeout 10
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
            }
        }
        real_server 192.168.30.130 80 {
            weight 100
            TCP_CHECK {
            connect_timeout 10
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
            }
         }
    }

在dir上启动keepalived服务；

[root@yuioplvlinux-128 ~]# systemctl start keepalived
    [root@yuioplvlinux-128 ~]# ps aux |grep keep
    root      7476  0.0  0.1 118676  1396 ?        Ss   15:58   0:03 /usr/sbin/keepalived -D
    root      7477  0.0  0.3 129604  3300 ?        S    15:58   0:01 /usr/sbin/keepalived -D
    root      7478  0.1  0.2 129544  2852 ?        S    15:58   0:28 /usr/sbin/keepalived -D
    root     64715  0.0  0.0 112720   964 pts/1    R+   23:34   0:00 grep --color=auto keep

在dir查看连接数；

[root@yuioplvlinux-128 ~]# ipvsadm -ln
    IP Virtual Server version 1.2.1 (size=4096)
    Prot LocalAddress:Port Scheduler Flags
      -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
    TCP  192.168.30.200:80 wlc persistent 60
      -> 192.168.30.129:80            Route   100    0          0         
      -> 192.168.30.130:80            Route   100    0          0

关闭其中一台rs（129）上的nginx服务；

[root@yuioplvlinux-129 ~]# systemctl stop nginx

在dir查看连接数，可以看到只有一台nginx了；

开启rs（129）上的nginx服务；

[root@yuioplvlinux-129 ~]# systemctl start nginx

在dir查看连接数，可以看到只有后端的rs又变成两台了。

[70]: https://img-blog.csdn.net/20180708230843111?watermark/2/text/aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3l1aW9wbHY=/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70
[70 1]: /images/20220520/5286cc19df614e0b90bf8fdd22b3a0fd.png