CentOS 6.5高可用集群LVS+Keepalived(DR模式)

456次阅读

共计 6963 个字符，预计需要花费 18 分钟才能阅读完成。

环境介绍

CentOS 6.5 高可用集群 LVS+Keepalived(DR 模式)

操作系统：CentOS6.5_x64 mini
负载均衡模式：DR（直接路由）
LVS 与 Keepalived 简述：
LVS 是 Linux Virtual Server 的简写，意即 Linux 虚拟服务器，是一个虚拟的服务器集群系统。使用集群技术和 Linux 操作系统实现一个高性能、高可用的服务器，很好的可伸缩性、可靠性和管理性。
LVS 集群采用 IP 负载均衡技术和基于内容请求分发技术。调度器具有很好的吞吐率，将请求均衡地转移到不同的服务器上执行，且调度器自动屏蔽掉服务器的故障，从而将一组服务器构成一个高性能的、高可用的虚拟服务器。
Keepalived 采用 VRRP(virtual router redundancy protocol，虚拟路由冗余协议)热备份协议，以软件的方式实现 linux 服务器的多机热备功能。VRRP 是针对路由器的一种备份解决方案 —– 由多台路由器组成一个热备组。通过共用的虚拟 IP 地址对外提供服务；每个热备组内同一时刻只有一台主服务器提供服务，其他服务器处于冗余状态，若当前在线的服务器失败，其他服务器会自动接替（优先级决定接替顺序）虚拟 IP 地址，以继续提供服务。

一、配置主从 LVS 服务器

安装依赖包：

[root@localhost ~]# yum install-y gcc gcc-c++ makepcre pcre-devel kernel-devel openssl-devel libnl-devel popt-devel

1、检查 linux 内核是否集成 lvs 模块：modprobe -l | grep ipvs
2、开启路由转发功能：echo “1”>/proc/sys/net/ipv4/ip_forward
3、安装 ipvsadm

wget http://www.linuxvirtualserver.org/software/kernel-2.6/ipvsadm-1.26.tar.gz
tar zxvf ipvsadm-1.26.tar.gz
cd ipvsadm-1.26
make && make install

4、安装 keepalived

wget http://www.keepalived.org/software/keepalived-1.2.7.tar.gz
tar zxvf keepalived-1.2.7.tar.gz
cd keepalived-1.2.7
./configure–prefix=/usr/local/keepalived
make && make install

将 keepalived 配置成系统服务

cp /usr/local/keepalived/etc/rc.d/init.d/keepalived/etc/init.d/
cp /usr/local/keepalived/etc/sysconfig/keepalived/etc/sysconfig/
mkdir /etc/keepalived/
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/keepalived/sbin/keepalived/usr/sbin/

5、修改主 keepalived 配置文件（备只修改 router_id、state 和 priority）

[root@localhost ~]# vi /etc/keepalived/keepalived.conf
! Configuration File forkeepalived
global_defs {
notification_email {
test@sina.com #故障接受联系人
}
notification_email_from admin@test.com #故障发送人
smtp_server 127.0.0.1 #本机发送邮件
smtp_connect_timeout 30
router_id LVS_MASTER #BACKUP 上修改为 LVS_BACKUP
}
vrrp_instance VI_1 {
state MASTER #BACKUP 上修改为 BACKUP
interface eth0
virtual_router_id 51 #虚拟路由标识，主从相同
priority 100 #BACKUP 上修改为 90
advert_int 1
authentication {
auth_type PASS
auth_pass 1111 #主从认证密码必须一致
}
virtual_ipaddress {#Web 虚拟 IP（VTP）
172.0.0.10
}
}
virtual_server 172.0.0.10 80 {#定义虚拟 IP 和端口
delay_loop 6 #检查真实服务器时间，单位秒
lb_algo rr #设置负载调度算法，rr 为轮训
lb_kind DR #设置 LVS 负载均衡 DR 模式
persistence_timeout 50 #同一 IP 的连接 60 秒内被分配到同一台真实服务器
protocol TCP #使用 TCP 协议检查 realserver 状态
real_server 172.0.0.13 80 {#第一个 web 服务器
weight 3 #节点权重值
TCP_CHECK {#健康检查方式
connect_timeout 3 #连接超时
nb_get_retry 3 #重试次数
delay_before_retry 3 #重试间隔 /S
}
}
real_server 172.0.0.14 80 {#第二个 web 服务器
weight 3
TCP_CHECK {
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
}

相关阅读：

LVS-DR 模式配置详解 http://www.linuxidc.com/Linux/2013-01/78679.htm

LVS-DR 直接路由实现负载均衡示例 http://www.linuxidc.com/Linux/2012-12/77033.htm

LVS-DR+Heartbeat 实现高可用负载均衡服务 http://www.linuxidc.com/Linux/2012-10/73008.htm

LVS-DR 模式原理详解和可能存在的“假负载均衡”http://www.linuxidc.com/Linux/2012-10/72892.htm

heartbeat+ldirectory 实现 LVS-DR 负载均衡器的高可用 http://www.linuxidc.com/Linux/2012-07/64736.htm

Keepalived+LVS-DR 模式配置高可用负载均衡集群 http://www.linuxidc.com/Linux/2012-06/63139.htm

二、分别在两台 Web 服务器编写脚本并启动

[root@localhost ~]# vi /etc/init.d/real.sh
#description : start realserver
VIP=172.0.0.10
. /etc/init.d/functions
case “$1” in
start)
/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up
echo “1” >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo “2” >/proc/sys/net/ipv4/conf/lo/arp_announce
echo “1” >/proc/sys/net/ipv4/conf/all/arp_ignore
echo “2” >/proc/sys/net/ipv4/conf/all/arp_announce
echo “LVS RealServer Start OK”
;;
stop)
/sbin/ifconfig lo:0 down
echo “0” >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo “0” >/proc/sys/net/ipv4/conf/lo/arp_announce
echo “0” >/proc/sys/net/ipv4/conf/all/arp_ignore
echo “0” >/proc/sys/net/ipv4/conf/all/arp_announce
echo “LVS RealServer Stoped OK”
;;
*)
echo “Usage: $0 {start|stop}”
exit 1
esac

[root@localhost ~]# chmod +x /etc/init.d/real.sh
[root@localhost ~]# /etc/init.d/real.sh start
LVS RealServer Start OK
[root@localhost ~]# echo “/etc/init.d/real.sh start” >> /etc/rc.local

[root@localhost ~]# service httpd start
[root@localhost ~]# echo“192.168.0.30″ > /var/www/html/index.html
[root@localhost ~]# echo“192.168.0.40″ > /var/www/html/index.html
[root@localhost ~]# service iptables stop #关闭防火墙
[root@localhost ~]# setenforce 0 #临时关闭 selinux

三、测试及常用命令
http://172.0.0.10 #访问一直刷新会轮训显示 172.0.0.11/12
模拟宕掉主 LVS，服务器照常工作，再宕掉 Web1，这时只会显示 Web2，这样就实现 ip 负载均衡，高可用集群。当主 LVS 恢复后，会切换成主动服务器，如果 Keepalived 监控模块检测 web 故障恢复后，恢复的主机又将此节点加入集群系统中。
常用命令：
[root@localhost ~]# ipvsadm -ln #显示集群中服务器 ip 信息
[root@localhost ~]# ip addr #显示 VTP 绑定在哪个服务器上

[root@localhost ~]# tail -f /var/log/messger
(从日志中可知，主机出现故障后，备机立刻检测到，此时备机变为 MASTER 角色，并且接管了主机的虚拟 IP 资源，最后将虚拟 IP 绑定在 etho 设备上)

环境介绍

CentOS 6.5 高可用集群 LVS+Keepalived(DR 模式)

操作系统：CentOS6.5_x64 mini
负载均衡模式：DR（直接路由）
LVS 与 Keepalived 简述：
LVS 是 Linux Virtual Server 的简写，意即 Linux 虚拟服务器，是一个虚拟的服务器集群系统。使用集群技术和 Linux 操作系统实现一个高性能、高可用的服务器，很好的可伸缩性、可靠性和管理性。
LVS 集群采用 IP 负载均衡技术和基于内容请求分发技术。调度器具有很好的吞吐率，将请求均衡地转移到不同的服务器上执行，且调度器自动屏蔽掉服务器的故障，从而将一组服务器构成一个高性能的、高可用的虚拟服务器。
Keepalived 采用 VRRP(virtual router redundancy protocol，虚拟路由冗余协议)热备份协议，以软件的方式实现 linux 服务器的多机热备功能。VRRP 是针对路由器的一种备份解决方案 —– 由多台路由器组成一个热备组。通过共用的虚拟 IP 地址对外提供服务；每个热备组内同一时刻只有一台主服务器提供服务，其他服务器处于冗余状态，若当前在线的服务器失败，其他服务器会自动接替（优先级决定接替顺序）虚拟 IP 地址，以继续提供服务。

一、配置主从 LVS 服务器

安装依赖包：

[root@localhost ~]# yum install-y gcc gcc-c++ makepcre pcre-devel kernel-devel openssl-devel libnl-devel popt-devel

1、检查 linux 内核是否集成 lvs 模块：modprobe -l | grep ipvs
2、开启路由转发功能：echo “1”>/proc/sys/net/ipv4/ip_forward
3、安装 ipvsadm

wget http://www.linuxvirtualserver.org/software/kernel-2.6/ipvsadm-1.26.tar.gz
tar zxvf ipvsadm-1.26.tar.gz
cd ipvsadm-1.26
make && make install

4、安装 keepalived

wget http://www.keepalived.org/software/keepalived-1.2.7.tar.gz
tar zxvf keepalived-1.2.7.tar.gz
cd keepalived-1.2.7
./configure–prefix=/usr/local/keepalived
make && make install

将 keepalived 配置成系统服务

cp /usr/local/keepalived/etc/rc.d/init.d/keepalived/etc/init.d/
cp /usr/local/keepalived/etc/sysconfig/keepalived/etc/sysconfig/
mkdir /etc/keepalived/
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/keepalived/sbin/keepalived/usr/sbin/

5、修改主 keepalived 配置文件（备只修改 router_id、state 和 priority）

[root@localhost ~]# vi /etc/keepalived/keepalived.conf
! Configuration File forkeepalived
global_defs {
notification_email {
test@sina.com #故障接受联系人
}
notification_email_from admin@test.com #故障发送人
smtp_server 127.0.0.1 #本机发送邮件
smtp_connect_timeout 30
router_id LVS_MASTER #BACKUP 上修改为 LVS_BACKUP
}
vrrp_instance VI_1 {
state MASTER #BACKUP 上修改为 BACKUP
interface eth0
virtual_router_id 51 #虚拟路由标识，主从相同
priority 100 #BACKUP 上修改为 90
advert_int 1
authentication {
auth_type PASS
auth_pass 1111 #主从认证密码必须一致
}
virtual_ipaddress {#Web 虚拟 IP（VTP）
172.0.0.10
}
}
virtual_server 172.0.0.10 80 {#定义虚拟 IP 和端口
delay_loop 6 #检查真实服务器时间，单位秒
lb_algo rr #设置负载调度算法，rr 为轮训
lb_kind DR #设置 LVS 负载均衡 DR 模式
persistence_timeout 50 #同一 IP 的连接 60 秒内被分配到同一台真实服务器
protocol TCP #使用 TCP 协议检查 realserver 状态
real_server 172.0.0.13 80 {#第一个 web 服务器
weight 3 #节点权重值
TCP_CHECK {#健康检查方式
connect_timeout 3 #连接超时
nb_get_retry 3 #重试次数
delay_before_retry 3 #重试间隔 /S
}
}
real_server 172.0.0.14 80 {#第二个 web 服务器
weight 3
TCP_CHECK {
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
}