1. LVS
1.1 LVS 原理
1.1.1 LVS 集群中的 IP 负载均衡技术
image
详情参考：LVS 集群中的 IP 负载均衡技术 @章文嵩博士
1.1.2 LVS 集群的负载调度
LVS 内核中的连接调度算法
详情参考：LVS 集群的负载调度 @章文嵩博士
查看 ipvsadm 版本：
# ipvsadm --version
ipvsadm v1.28 2015/02/09 (compiled with popt and IPVS v1.2.1)
2. Keepalived
2.1 Keepalived 架构
Keepalived 架构图
2.2 Keepalived 安装及配置
2.2.1 查询本机网络接口
查询本机 IP 地址命令：ip addr list、ip addr show、ip a
# ip a
1: lo: mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: mtu 9001 qdisc fq_codel state UP group default qlen 1000
link/ether 02:a2:63:89:23:50 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.62/24 brd 10.0.0.255 scope global dynamic eth0
valid_lft 3505sec preferred_lft 3505sec
inet6 fe80::a2:63ff:fe89:2350/64 scope link
valid_lft forever preferred_lft forever
# 配置并启动网络接口
# 配置虚拟IP
# 将网络接口 eth0:1 的 IP 地址设置为：172.27.0.10，子网掩码设置为：255.255.255.255，
# up：启动网络接口
# down：关闭网络接口
ifconfig eth0:1 172.27.0.10 broadcast 172.27.0.10 netmask 255.255.255.255 up
# 关闭网络接口
ifconfig eth0:1 172.27.0.10 broadcast 172.27.0.10 netmask 255.255.255.255 down
2.2.2 修改系统配置文件
2.2.2.1 编辑系统配置文件：vim /etc/sysctl.conf
前端 LVS 配置：
# Uncomment the next line to enable packet forwarding for IPv4
# 开启 IPv4 数据包转发功能
net.ipv4.ip_forward=1
# 允许绑定非本机的IP
net.ipv4.ip_nonlocal_bind=1
参考：
- ECS 做负载均衡需要用户做额外的配置吗？
- Linux 实例常用内核网络参数介绍与常见问题处理
后端 Server 配置：
# Uncomment the next two lines to enable Spoof protection (reverse-path filter)
# Turn on Source Address Verification in all interfaces to
# prevent some spoofing attacks
net.ipv4.conf.default.rp_filter=0
net.ipv4.conf.all.rp_filter=0
net.ipv4.conf.eth0.rp_filter=0
2.2.2.2 使配置文件生效
每次系统启动时，初始化脚本 /etc/rc.d/rc.sysinit 会读取 /etc/sysctl.conf 文件的内容，所以修改此文件后每次系统重启时都会开启 IP 转发功能。但是只修改 sysctl 文件不会马上生效，如果需要使修改马上生效可以执行下面的命令：
# 使配置文件马上生效
$ sudo sysctl -p
net.ipv4.ip_forward = 1
2.2.2.3 验证配置是否生效
# 查看 ip_forward 文件内容，默认值 0 表示禁止 IP 转发，1 表示开启 IP 转发功能。
$ cat /proc/sys/net/ipv4/ip_forward
1
$ cat /proc/sys/net/ipv4/ip_nonlocal_bind
1
2.2.3 下载安装 Keepalived
# 1. 更新 apt 软件包
apt-get update && apt-get upgrade
# 2. 安装相关软件包
apt-get install -y libssl-dev openssl libpopt-dev
apt install jq
apt install awscli
# 3. 下载安装 Keepalived
apt-get install keepalived
# 4. 查看 Keepalived 安装版本
keepalived --version
Keepalived v1.3.9 (10/21,2017)
...
2.3 Keepalived 配置文件详解
Keepalived 配置文件官方文档：http://www.keepalived.org/manpage.html
- keepalived 的配置文件路径为：/etc/keepalived/keepalived.conf
- Keepalived 的配置文件都是以块（block）的形式组织的，每个块的内容都包含在 {} 中，以 “#” 和 “!” 开头的行都是注释。
- 根据 Keepalived 配置文件所实现的功能，可以将配置分为三类：
- 全局配置（Global Configuration）；
- VRRPD 配置；
- VRRP 同步组配置；
- VRRP 实例配置；
- LVS 配置；
Keepalived.conf 文件结构
# Define the script used to check if haproxy is still working
# 检查 haproxy 是否正常运行的脚本
vrrp_script chk_haproxy {
script "killall -0 haproxy"
interval 2
weight 2
}
2.3.1 Keepalived 的全局配置
全局配置就是对整个 Keepalived 都生效的配置。
# Configuration File for keepalived
# ------ 全局配置 ------
# 报警邮件通知设置
# 全局配置以 “global_defs” 作为标识符
global_defs {
notification_email {
[email protected] # 报警邮件地址，可以设置多个，每行一个。
# 开启邮件报警需要开启本机的 Sendmail 服务。
}
notification_email_from [email protected] # 报警邮件发送的地址。
smtp_server 127.0.0.1 # 邮件的 SMTP 服务器地址。
smtp_connect_timeout 15 # 连接 SMTP 服务器的超时时间。
router_id lVS_DEVER # 运行 Keepalived 服务器的一个标识符，
# 是发邮件时显示在邮件主题中的信息。
}
2.3.2 Keepalived 的 VRRPD 配置
VRRPD 配置是 Keepalived 所有配置的核心，主要用来实现 Keepalived 的高可用功能。
从结构上来看，VRRPD 配置可以分为 VRRP 同步组配置 和 VRRP 实例配置。
2.3.2.1 VRRP 同步组配置
同步组是相对于多个 VRRP 实例而言的，在多个 VRRP 实例的环境中，每个 VRRP 实例所对应的网络环境会有所不同，假设一个实例处于网段A，另一个实例处于网段B，而如果 VRPD 只配置了A网段的检测，那么当B网段主机出现故障时， VRRPD 会认为自身仍处于正常状态，进而不会进行主备节点的切换，这样问题就出现了。同步组就是用来解决这个问题的，将所有 VRRP 实例都加入到同步组中，这样任何一个实例出现问题，都会导致 Keepalived进行主备切换。
vrrp_sync_group G1 {
# G1 同步组包含 VI_1、VI_2、VI_5 三个 VRRP 实例
group {
# name of the vrrp_instance (see below)
# Set of VRRP_Instance string
VI_1
VI_2
VI_5
}
# to MASTER transition
# 指定当 Keepalived 进入 Master 状态时要执行的脚本，
# 这个脚本可以是一个状态报警脚本，也可以是一个服务管理脚本。
# Keepalived 允许脚本传入参数，因此灵活性很强。
notify_master "usr/local/bin/vrrp.mast arg1 arg2"
# to BACKUP transition
# 指定当 Keepalived 进入 Backup 状态时要执行的脚本，
# 这个脚本可以是一个状态报警脚本，也可以是一个服务管理脚本。
notify_backup "usr/local/bin/vrrp.back arg1 arg2"
# FAULT transition
# 指定当 Keepalived 进入 Fault 状态时要执行的脚本
notify_fault "usr/local/bin/vrrp.fault arg1 arg2"
# executed when stopping vrrp
# 指定 Keepalived 程序终止时需要执行的脚本。
notify_stop "usr/local/bin/vrrp.stop arg1 arg2"
}
vrrp_sync_group G2 {
# G2 同步组包含 VI_3、VI_4 三个 VRRP 实例
group {
VI_3
VI_4
}
}
2.3.2.2 VRRP 实例配置
VRRP 实例配置——配置 Keepalived 的高可用功能。
VRRP 实例段主要用来配置节点角色（主或从）、实例绑定的网络接口、节点间验证机制、集群服务 IP 等。
从调度器的配置与主调度器基本相同，也包括全局参数、热备参数、服务器池配置，只需要调整 router_id、state、prority 参数即可，其余内容完全相同，配置完成以后重启keepalived服务。
# ------ 虚拟服务器配置 ------
# vrrp 实例配置
# VRRP 配置以 “vrrp_instance” 作为标识符
vrrp_instance VI_1 {
state MASTER # 指定 Keepalived 的角色。
# MASTER 表示此主机是主服务器，Backup 表示此主机是备用服务器。
# 因此，在另一台服务器上设置该值为 BACKUP。
interface eth0 # 指定 HA 监测网络的接口。
virtual_router_id 51 # 虚拟路由ID(0-255)，在一个VRRP实例中主备服务器ID必须一样
priority 101 # 定义节点优先级。set this to 100 on the other machine
advert_int 1 # 用于设定 MASTER 与 BACKUP 主机之间同步检查的时间间隔，单位是秒。
mcast_src_ip # 发送多播包的地址。
garp_master_delay 10
smtp_alert # Activate email notifications
# 设置一些额外的网络监控接口
track_interface {
eth0
eth1
}
# 设定节点间通信验证类型和密码
authentication {
auth_type PSAA # 验证类型，有 PASS 和 AH 两种模式。
auth_pass myPassw0rd # Set this to some secret phrase
}
# The virtual ip address shared between the two loadbalancers
# 虚拟 IP 地址
virtual_ipaddress {
#/ brd dev scope label 2.3.3 Keepalived 的 LVS 配置
由于 Keepalived 属于 LVS 的扩展项目，因此，Keepalived 可以与 LVS无缝整合，轻松搭建一套高性能的负载均衡集群系统。
LVS 段的内容有两部分组成：
- real_server 段；
- 健康检测段；
# 虚拟服务器配置
# LVS 段的配置以“virtual_server”作为开始标识。
virtual_server 192.168.80.200 80 { # 设置虚拟 IP 地址和服务端口
delay_loop 6 # 设置健康检查的时间间隔，单位是秒
lb_kind DR # 设置 LVS IP负载均衡模式，有NAT、TUN、DR三个模式
lb_algo rr # 设置 LVS 负载调度算法，rr
persistence_timeout 50 # 会话保持时间，单位是秒。
persistence_granularity # 子网掩码。表示持久连接的粒度。默认是255.255.255.255
protocol TCP # 指定转发协议类型。有 TCP 和 UDP 两种选项。
ha_suspend # 节点状态从 Master 到 Backup 切换时，暂不启用 real server 节点的健康检查。
virtualhost # 健康检查时，指定 Web 服务器的虚拟主机地址。
sorry_server # 当所有 real server 失效后，指定的 Web 服务器的虚拟主机地址。
# -------- real_server 段配置 --------
real_server 192.168.80.102 80 { # 指定 real server1 的IP地址
weight 3 # 配置节点权值，数字越大权重越高
inhibit_on_faliure # 在检测到 real_server 节点失效后，把它的 “Weight” 值设置为0，而不是从 IPVS 中删除。
notify_up | # 在检测到 real_server 节点服务处于 UP 状态后执行的脚本
notify_down | # 在检测到 real_server 节点服务处于 DOWN 状态后执行的脚本
# -------- 健康检测段配置 -------
TCP_CHECK { # 配置为 TCP_CHECK 检测方式
connect_port 80 # 健康检查的端口
connect_timeout 10 # 无响应超时时间。单位是秒。
retry 3 # 重试次数
delay_before_retry 3 # 重试间隔
}
}
real_server 192.168.80.103 80 { # 指定 real server2 的IP地址
weight 3 # 配置节点权值，数字越大权重越高
TCP_CHECK {
connect_port 80
connect_timeout 10
retry 3
delay_before_retry 3
}
}
}
2.4 启动与停止服务
# 方式一
/etc/init.d/keepalived status # 查看状态
/etc/init.d/keepalived stop # 停止
/etc/init.d/keepalived start # 启动
# 方式二
sudo service keepalived status
sudo service keepalived start
sudo service keepalived stop
sudo service keepalived restart
2.5 测试
2.5.1 查看服务进程状态：ip
必须要有三个keepalived的进程，这三个分别是keepalived父进程，vrrp子进程、check子进程；两个子进程都被系统watchlog看管，两个子进程各自负责复杂自己的事
2.5.2 其次ip addr查看虚拟 ip 是否创建成功，ping 虚拟 ip 是否相通。
2.5.3 查看集群中服务器ip信息：ipvsadm -ln
2.5.4 查看 Keepalived 日志：cat /var/log/syslog | grep Keepalived
：ipvsadm 指令详解
# 查看 ipvsadm 版本
$ ipvsadm --version
ipvsadm v1.28 2015/02/09 (compiled with popt and IPVS v1.2.1)
# 查看集群中服务器ip信息
# -l、-list:列出虚拟服务器表
# -n:IP 地址和端口号将以数字格式打印，而不是作为主机名和服务分别打印，这是默认设置。
ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 10.0.0.100:80 lc persistent 60
-> 10.0.0.102:80 Route 3 0 0
-> 10.0.0.202:80 Route 3 0 0
# -c:连接输出。使用此选项的 list 命令将列出当前的 IPVS 连接
ipvsadm -lnc
IPVS connection entries
pro expire state source virtual destination
TCP 00:48 NONE 111.187.40.59:0 10.0.0.138:80 10.0.0.214:80
TCP 00:59 SYN_RECV 111.187.40.59:5196 10.0.0.138:80 10.0.0.214:80
TCP 00:59 SYN_RECV 111.187.40.59:5197 10.0.0.138:80 10.0.0.214:80
TCP 00:59 SYN_RECV 111.187.40.59:5198 10.0.0.138:80 10.0.0.214:80
# 查看
arp -n
Address HWtype HWaddress Flags Mask Iface
10.0.0.202 ether 02:fb:fd:00:12:ae C eth0
10.0.0.1 ether 02:06:a0:5b:39:d2 C eth0
10.0.0.2 ether 02:06:a0:5b:39:d2 C eth0
10.0.0.102 ether 02:2b:7d:01:b6:68 C eth0
10.0.0.199 ether 02:63:16:9e:f2:08 C eth0
10.0.0.100 (incomplete) eth0
2.5.5 验证 VIP 漂移
systemctl stop keepalived.service
2.5.6 测试抓取数据包
tcpdump -i eth0 -p -n -vv port 80
AWS 下的部署实例
参考
- AWS 部署 keepalived实战
- 如何在AWS中正确使用Keepalived
- Assign a floating (secondary) IP address in AWS VPC
- Leveraging Multiple IP Addresses for Virtual IP Address Fail-over in 6 Simple Steps
在私有环境中部署keepalived本身并没有好说的，但是aws中存在诸多限制，其中三个需要明确指出的：
-
VRRP协议的组播被禁止，也就是说keepalived需要调整心跳的通知方式，修改/etc/keepalived/keepalived.conf配置文件中的通知为单播模式，一般配 web 服务器上数量较少，所以也不会损失太多网络带宽。
unicast_src_ip 172.*.*.1 # 本机IP unicast_peer { 172.*.*.124 # 备用节点 IP }AWS 常见问题汇总
配置了VIP（floating ip）以后，AWS的VPC并不知道，尝试下arp也学习不到该vip的mac地址，所以必须要通过配置ENI（Elastic Network Interface弹性网络接口）使得该VIP可达。
然而当你关了Master以后，ENI的网络配置并不会自动切换漂移IP，为了故障切换，我利用切换VIP的通知机制，通过调用添加和移除private-ip-addresses的方式达到漂移IP的效果。下面详细介绍。
还要新建一个 IAM 账户，以允许运行 AWS CLI 命令，并在服务器上进行注册。
aws configure
绑定辅助私有IP ⭐️⭐️⭐️
亚马逊云虽然不允许广播 ARP，但可以用命令行指定网卡（ENI）的 Secondary-private-ip-address。这个命令的具体形式如下：
AWS CLI Command Reference：assign-private-ip-addresses
# 将一个或多个辅助私有 IP 地址分配给指定的网络接口。
# ENI：网卡实例 ID
# VIP：虚拟 IP 地址
aws ec2 assign-private-ip-addresses \
--network-interface-id $ENI \
--private-ip-addresses $VIP \
--allow-reassignment
# 示例：指定一个IP地址（10.0.0.100）作为网卡的私有IP地址
aws ec2 assign-private-ip-addresses --network-interface-id eni-0a8a8f03710ecbb9e --private-ip-addresses 10.0.0.100 --allow-reassignment
aws ec2 assign-private-ip-addresses --network-interface-id eni-0eff36fde0c99958e --private-ip-addresses 10.0.0.100 --allow-reassignment
keepalived 配置：
notify_master "/home/keepalived/scripts/mysql_be_master.sh 172.*.*.201 eni-*"
弹性IP配置的脚本文件
add_eip.sh
作用：分离弹性 ip，并将弹性 ip 绑定到自身网口上
授权：chmod -R 711 /etc/keepalived/scripts
#/bin/bash
EIP=13.*.*.201 # 弹性 ip 地址（公网 ip）
INSTANCE_ID=i-0b2d************* #此服务器（EC2）的实例的 id
aws ec2 disassociate-address --public-ip $EIP
aws ec2 associate-address --public-ip $EIP --instance-id $INSTANCE_ID
del_eip.sh
授权 chmod +x ./add_eip.sh chmod -R 711 add_eip.sh
#/bin/bash
EIP=13.*.*.201 #弹性 ip 地址（公网 ip）
INSTANCE_ID=i-0b2d************* #备服务器（EC2）的实例的 id
aws ec2 disassociate-address --public-ip $EIP
aws ec2 associate-address --public-ip $EIP --instance-id $INSTANCE_ID
# 取消关联需要传关联 ID，而不是分配 ID。
aws ec2 disassociate-address --association-id $ASSOCIATION_ID
aws ec2 disassociate-address --association-id eipassoc-09fe640e36c9d53b1
把外网 EIP 作为 VIP，先释放，再关联给一个网卡的辅助私有IP地址：
参考：AWS CLI:associate-address
aws ec2 disassociate-address --public-ip $EIP
aws ec2 associate-address \
--allocation-id eipalloc-09ce336dc7a1e8da7 \ # 分配 ID
--network-interface-id eni-0a8a8f03710ecbb9e \
--private-ip-address 10.0.0.100 \
--allow-reassociation
# 关联弹性公网 IP 到 网卡
aws ec2 associate-address --allocation-id eipalloc-09ce336dc7a1e8da7 --network-interface-id eni-0a8a8f03710ecbb9e --private-ip-address 10.0.0.100 --allow-reassociation
# 根据实例 ID 找到网卡 ID
aws ec2 describe-instances \
--instance-ids i-0260f608cf698958c | \
jq -r \
'.Reservations[0].Instances[0].NetworkInterfaces[0].NetworkInterfaceId'
# 实例
aws ec2 describe-instances --instance-ids i-0260f608cf698958c | jq -r '.Reservations[0].Instances[0].NetworkInterfaces[0].NetworkInterfaceId'
eni-0a8a8f03710ecbb9e
配置文件
EC2_01
# Keepalived的全局配置
global_defs {
router_id LVS_Master
# 通知脚本设置
script_user root
enable_script_security
}
# VRRP的实例Group_LVS_1配置
vrrp_instance Group_LVS_1 {
state MASTER
interface eth0
virtual_router_id 51
priority 100
advert_int 1
track_interface {
eth0
}
# AWS 上 VRRP 协议的组播被禁止，因此这里配置心跳通知为单播模式
unicast_src_ip 10.0.0.36
unicast_peer {
10.0.0.56
}
authentication {
auth_type PASS
auth_pass 123456
}
virtual_ipaddress {
10.0.0.100
}
# 切换虚拟 IP 的脚本文件
notify_master "/etc/keepalived/scripts/assign_private_ip.sh 18.223.129.244 10.0.0.100 i-0260f608cf698958c"
notify_backup "/etc/keepalived/scripts/unassign_private_ip.sh 18.223.129.244 10.0.0.100 i-0260f608cf698958c"
}
# Virtual Server 的配置 for Real Service
virtual_server 10.0.0.100 80 {
delay_loop 5
lb_algo lc
lb_kind DR
persistence_timeout 60
protocol TCP
# Real Server 1 的配置
real_server 10.0.0.80 80 {
weight 3
inhibit_on_failure
TCP_CHECK {
connect_timeout 10
retry 3
delay_before_retry 3
connect_port 80
}
}
# Real Server 2 的配置
real_server 10.0.0.194 80 {
weight 3
inhibit_on_failure
TCP_CHECK {
connect_timeout 10
retry 3
delay_before_retry 3
connect_port 80
}
}
}
EC2_02
# Keepalived的全局配置
global_defs {
router_id LVS_Master
# 通知脚本设置
script_user root
enable_script_security
}
# VRRP的实例Group_LVS_1配置
vrrp_instance Group_LVS_1 {
state BACKUP
interface eth0
virtual_router_id 51
priority 90
advert_int 1
track_interface {
eth0
}
# AWS 上 VRRP 协议的组播被禁止，因此这里配置心跳通知为单播模式
unicast_src_ip 10.0.0.56
unicast_peer {
10.0.0.36
}
authentication {
auth_type PASS
auth_pass 123456
}
virtual_ipaddress {
10.0.0.100
}
# 切换虚拟 IP 的脚本文件
notify_master "/etc/keepalived/scripts/assign_private_ip.sh 18.223.129.244 10.0.0.100 i-0f74aba2dc5e49679"
notify_backup "/etc/keepalived/scripts/unassign_private_ip.sh 18.223.129.244 10.0.0.100 i-0f74aba2dc5e49679"
}
# Virtual Server 的配置 for Real Service
virtual_server 10.0.0.100 80 {
delay_loop 5
lb_algo lc
lb_kind DR
persistence_timeout 60
protocol TCP
# Real Server 1 的配置
real_server 10.0.0.80 80 {
weight 3
inhibit_on_failure
TCP_CHECK {
connect_timeout 10
retry 3
delay_before_retry 3
connect_port 80
}
}
# Real Server 2 的配置
real_server 10.0.0.194 80 {
weight 3
inhibit_on_failure
TCP_CHECK {
connect_timeout 10
retry 3
delay_before_retry 3
connect_port 80
}
}
}
Server 服务器脚本
#!/bin/bash
# 配置realserver的lo和运用noarp
# chmod 755 /usr/local/sbin/server
# 执行server，启动realserver的LVS服务，/etc/init.d/lvsrs start
VIP=10.0.0.100
/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up
/sbin/route add -host $VIP dev lo:0
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
sysctl -p
#end
/etc/init.d/lvsrs start
#!/bin/bash
# 配置realserver的lo和noarp
# chmod 755 /etc/init.d/lvsrs
# 执行server，启动realserver的LVS服务，/etc/init.d/lvsrs start
VIP=10.0.0.100
/etc/rc.d/init.d/functions
case "$1" in
start)
ifconfig lo:0 $VIP netmask 255.255.255.255 broadcast $VIP
/sbin/route add -host $VIP dev lo:0
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
sysctl -p >/dev/null 2>&1
echo "RealServer Start OK"
;;
stop)
ifconfig lo:0 down
route del $VIP >/dev/null 2>&1
echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce
echo "RealServer Stoped"
;;
*)
echo "Usage: $0 {start|stop}"
exit 1
esac
exit 0
参考
1. LVS
- LVS 项目中文文档@章文嵩 ⭐️⭐️⭐️
- LVS 中文站点
- ：LVS 原理介绍
- cnblogs：使用 LVS 实现负载均衡原理及安装配置详解
- LVS 原理详解及部署之二：LVS 原理详解（3 种工作方式 8 种调度算法）
- LVS 集群：两种 VS/DR 模式
- LVS 集群：ipvsadm 使用及 VS/NAT 实现
- InfoQ：LVS 在大规模网络环境中的应用
2. Keepalived
- keepalived 官网
- GitHub: Keepalived
- ：Keepalived in AWS
- 51CTO：aws ec2 keepalived 的高可用构建
- CSDN：AWS 部署 keepalived 实战
- 在 AWS 上部署 keepalived
3. 第三方博客、文章
- 【大型网站技术实践】初级篇：借助LVS+Keepalived实现负载均衡
- ：lvs+keepalived群集配置
- LVS+Keepalived实现高可用群集
- LVS Keepalived双机高可用负载均衡搭建
- Ubuntu安装keepalived
- Setting up keepalived on Ubuntu (load balancing using HAProxy on Ubuntu part 2)
- LVS负载均衡在Ubuntu环境下部署详解
- Nginx/LVS/HAProxy 负载均衡软件的优缺点详解（转自云栖社区）
- 深入理解负载均衡【Tip：里面有一张负载均衡双机热备GIF图可以看看】
- 双机热备架构图：https://ask.qcloudimg.com/http-save/yehe-1305760/28jixn9vop.gif
- 阿里云文档：ECS 做负载均衡需要用户做额外的配置吗？
- 阿里云文档：Linux 实例常用内核网络参数介绍与常见问题处理
- 阿里云文档：ping 丢包或不通时链路测试说明