LVS DR模式搭建，keepalived + LVS搭建

阿豪 1年前 ( 2020-02-22 ) 167

默认

摘要： LVS DR模式搭建 1.准备工作 DR模式同样需要三台虚拟机，三台机器只需要...

LVS DR模式搭建

1.准备工作

DR模式同样需要三台虚拟机，三台机器只需要有“公网”IP，但在这种模式下又多了一个VIP。

三台机器

调度器ip：192.168.5.5

真实服务器rs1:192.168.5.6

真实服务器rs2:192.168.5.9

vip:192.168.5.10

dir上编写脚本 vim /usr/local/sbin/lvs_dr.sh //内容如下

#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.5.10
rs1=192.168.5.6
rs2=192.168.5.9
#注意这里的网卡名字
ifdown ens33
ifup ens33
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens33:2
$ipv -C
$ipv -A -t $vip:80 -s rr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

运行服务

[root@ahao01 ~]# sh /usr/local/sbin/lvs_dr.sh 成功断开设备 'ens33'。

成功激活的连接（D-Bus 激活路径：/org/freedesktop/NetworkManager/ActiveConnection/2）

两台rs上也编写脚本 vim /usr/local/sbin/lvs_rs.sh//内容如下

#/bin/bash
vip=192.168.5.10
#把vip绑定在lo上，是为了实现rs直接把结果返回给客户端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数，目的是为了让rs顺利发送mac地址给客户端
#参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
# sh /usr/local/sbin/lvs_rs.sh

查看网关

[root@ahao03 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.5.2     0.0.0.0         UG    100    0        0 ens33
192.168.5.0     0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.5.10    0.0.0.0         255.255.255.255 UH    0      0        0 lo
[root@ahao02 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.5.2     0.0.0.0         UG    100    0        0 ens33
192.168.5.0     0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.5.10    0.0.0.0         255.255.255.255 UH    0      0        0 lo

测试

keepalived lvs

LVS架构中，不管是NAT模式还是DR模式，当后端的RS宕掉时，调度器依然会把请求转发到宕掉的RS上，这样的结果并不是我们想要的。keepalived就可以解决该问题，它不仅仅有高可用的功能，还有负载均衡的功能，在调度器上只要安装了keepalived，就不用再安装ipvsadm了，也不用去编写LVS相关的脚本了，也就是说keepalived已经嵌入了LVS功能，完整的keepalived+LVS架构需要有两台调度器实现高可用，提供调度服务的只需要一台，另外一台作为备用。

完整架构需要两台服务器（角色为dir）分别安装keepalived软件，目的是实现高可用，但keepalived本身也有负载均衡的功能，所以本次实验可以只安装一台keepalived。

1、准备

三台机器分别为：

主（安装keepalived）：192.168.5.5

真实服务器 rs1：192.168.5.6

真实服务器 rs2 ：192.168.5.9

vip ：192.168.5.10

编辑keepalived配置文件 vim /etc/keepalived/keepalived.conf

vrrp_instance VI_1 {
    #备用服务器上为 BACKUP
    state MASTER
    #绑定vip的网卡为ens33，你的网卡和阿铭的可能不一样，这里需要你改一下
    interface ens33
    virtual_router_id 51
    #备用服务器上为90
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass aminglinux
    }
    virtual_ipaddress {
        192.168.5.10
    }
}
virtual_server 192.168.188.110 80 {
    #(每隔10秒查询realserver状态)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的连接60秒内被分配到同一台realserver)
    persistence_timeout 60
    #(用TCP协议检查realserver状态)
    protocol TCP
    real_server 192.168.5.6 80 {
        #(权重)
        weight 100
        TCP_CHECK {
        #(10秒无响应超时)
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
    real_server 192.168.5.9 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }
}
 # 需要更改里面的ip信息
#由于之前执行过LVS的脚本，可能需要做以下操作：
#把之前的ipvsadm规则清空

#由于之前执行过LVS的脚本，可能需要做以下操作：

#把之前的ipvsadm规则清空

[root@ahao-01 ~]# ipvsadm -C

#把之前设置的VIP删除掉

[root@ahao-01 ~]# systemctl restart network

#在keepalived的配置文件中定义的LVS模式为DR模式，所以需要在两台rs上执行lvs_dr_rr.sh脚本，在上一节设置的脚本。

[root@ahao-01 ~]# sh /usr/local/sbin/lvs_dr_rs.ch

#启动keepalived

[root@garytao-01 ~]# systemctl start keepalived
[root@ahao01 ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.5.10:80 rr
  -> 192.168.5.6:80               Route   1      0          0         
  -> 192.168.5.9:80               Route   1      0          0

ps：keepalived具有吧故障的机器剔除

rs1和rs2 需要执行/usr/local/sbin/lvs_rs.sh

dir上需要执行echo 1 > /proc/sys/net/ipv4/ip_forward