LVS DR模式搭建,keepalived + LVS搭建
温馨提示:这篇文章已超过859天没有更新,请注意相关的内容是否还可用!
LVS DR模式搭建
1.准备工作
DR模式同样需要三台虚拟机,三台机器只需要有“公网”IP,但在这种模式下又多了一个VIP。
三台机器
调度器ip:192.168.5.5
真实服务器rs1:192.168.5.6
真实服务器rs2:192.168.5.9
vip:192.168.5.10
dir上编写脚本 vim /usr/local/sbin/lvs_dr.sh //内容如下
#! /bin/bash echo 1 > /proc/sys/net/ipv4/ip_forward ipv=/usr/sbin/ipvsadm vip=192.168.5.10 rs1=192.168.5.6 rs2=192.168.5.9 #注意这里的网卡名字 ifdown ens33 ifup ens33 ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up route add -host $vip dev ens33:2 $ipv -C $ipv -A -t $vip:80 -s rr $ipv -a -t $vip:80 -r $rs1:80 -g -w 1 $ipv -a -t $vip:80 -r $rs2:80 -g -w 1
运行服务
[root@ahao01 ~]# sh /usr/local/sbin/lvs_dr.sh 成功断开设备 'ens33'。
成功激活的连接(D-Bus 激活路径:/org/freedesktop/NetworkManager/ActiveConnection/2)
两台rs上也编写脚本 vim /usr/local/sbin/lvs_rs.sh//内容如下
#/bin/bash vip=192.168.5.10 #把vip绑定在lo上,是为了实现rs直接把结果返回给客户端 ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up route add -host $vip lo:0 #以下操作为更改arp内核参数,目的是为了让rs顺利发送mac地址给客户端 #参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce # sh /usr/local/sbin/lvs_rs.sh
查看网关
[root@ahao03 ~]# route -n Kernel IP routing table Destination Gateway Genmask Flags Metric Ref Use Iface 0.0.0.0 192.168.5.2 0.0.0.0 UG 100 0 0 ens33 192.168.5.0 0.0.0.0 255.255.255.0 U 100 0 0 ens33 192.168.5.10 0.0.0.0 255.255.255.255 UH 0 0 0 lo [root@ahao02 ~]# route -n Kernel IP routing table Destination Gateway Genmask Flags Metric Ref Use Iface 0.0.0.0 192.168.5.2 0.0.0.0 UG 100 0 0 ens33 192.168.5.0 0.0.0.0 255.255.255.0 U 100 0 0 ens33 192.168.5.10 0.0.0.0 255.255.255.255 UH 0 0 0 lo
测试
keepalived lvs
LVS架构中,不管是NAT模式还是DR模式,当后端的RS宕掉时,调度器依然会把请求转发到宕掉的RS上,这样的结果并不是我们想要的。keepalived就可以解决该问题,它不仅仅有高可用的功能,还有负载均衡的功能,在调度器上只要安装了keepalived,就不用再安装ipvsadm了,也不用去编写LVS相关的脚本了,也就是说keepalived已经嵌入了LVS功能,完整的keepalived+LVS架构需要有两台调度器实现高可用,提供调度服务的只需要一台,另外一台作为备用。
完整架构需要两台服务器(角色为dir)分别安装keepalived软件,目的是实现高可用,但keepalived本身也有负载均衡的功能,所以本次实验可以只安装一台keepalived。
1、准备
三台机器分别为:
主(安装keepalived):192.168.5.5
真实服务器 rs1:192.168.5.6
真实服务器 rs2 :192.168.5.9
vip :192.168.5.10
编辑keepalived配置文件 vim /etc/keepalived/keepalived.conf
vrrp_instance VI_1 { #备用服务器上为 BACKUP state MASTER #绑定vip的网卡为ens33,你的网卡和阿铭的可能不一样,这里需要你改一下 interface ens33 virtual_router_id 51 #备用服务器上为90 priority 100 advert_int 1 authentication { auth_type PASS auth_pass aminglinux } virtual_ipaddress { 192.168.5.10 } } virtual_server 192.168.188.110 80 { #(每隔10秒查询realserver状态) delay_loop 10 #(lvs 算法) lb_algo wlc #(DR模式) lb_kind DR #(同一IP的连接60秒内被分配到同一台realserver) persistence_timeout 60 #(用TCP协议检查realserver状态) protocol TCP real_server 192.168.5.6 80 { #(权重) weight 100 TCP_CHECK { #(10秒无响应超时) connect_timeout 10 nb_get_retry 3 delay_before_retry 3 connect_port 80 } } real_server 192.168.5.9 80 { weight 100 TCP_CHECK { connect_timeout 10 nb_get_retry 3 delay_before_retry 3 connect_port 80 } } } # 需要更改里面的ip信息 #由于之前执行过LVS的脚本,可能需要做以下操作: #把之前的ipvsadm规则清空
#由于之前执行过LVS的脚本,可能需要做以下操作:
#把之前的ipvsadm规则清空
[root@ahao-01 ~]# ipvsadm -C
#把之前设置的VIP删除掉
[root@ahao-01 ~]# systemctl restart network
#在keepalived的配置文件中定义的LVS模式为DR模式,所以需要在两台rs上执行lvs_dr_rr.sh脚本,在上一节设置的脚本。
[root@ahao-01 ~]# sh /usr/local/sbin/lvs_dr_rs.ch
#启动keepalived
[root@garytao-01 ~]# systemctl start keepalived [root@ahao01 ~]# ipvsadm -ln IP Virtual Server version 1.2.1 (size=4096) Prot LocalAddress:Port Scheduler Flags -> RemoteAddress:Port Forward Weight ActiveConn InActConn TCP 192.168.5.10:80 rr -> 192.168.5.6:80 Route 1 0 0 -> 192.168.5.9:80 Route 1 0 0
ps:keepalived具有吧故障的机器剔除
rs1和rs2 需要执行/usr/local/sbin/lvs_rs.sh
dir上需要执行echo 1 > /proc/sys/net/ipv4/ip_forward