前言：为什么要玩转 Overlay 负载均衡？

大胆一点... 如果你已经在传统的三层网络里摸爬滚打多年， 忽然被“Overlay”这个词刷屏，可能会觉得它像是云端的神秘面纱。但说实在的， Overlay 就是把原本平坦的二层网络“叠加”到已有的物理网络之上，让跨主机容器通信像在同一局域网里一样自然。

更棒的是 配合 Keepalived，你可以把虚拟 IP漂浮在多台机器之间，实现高可用+负载均衡的双保险。想象一下 当一台服务器因故障离线时业务仍旧毫无感知地切换到另一台， 踩个点。 这种平安感足以让每个运维夜不能寐的灵魂安然入睡。

一、 环境准备：先把底子打牢

1. 确认系统版本

# cat /etc/centos-release
CentOS Linux release 8.5.2111 

本文基于 CentOS 8 编写，CentOS 7 也基本兼容， 被割韭菜了。 只是部分软件包名称略有不同。

2. 安装核心工具

# yum install -y epel-release
# yum install -y bridge-utils keepalived docker
# systemctl enable --now docker
# systemctl start firewalld && systemctl enable firewalld

3. 打开必要端口

# firewall-cmd --permanent --add-port=2377/tcp
# firewall-cmd --permanent --add-port=4789/udp
# firewall-cmd --permanent --add-port=112/udp
# firewall-cmd --reload

二、 构建网络桥接：让物理 NIC 合体为一体

有时候我们希望把两块网卡打成一个桥，让流量可以自由切换。下面的命令会让你的服务器瞬间变身“双臂巨人”。

# sudo brctl addbr br0
# sudo brctl addif br0 eth0
# sudo brctl addif br0 eth1
# ifconfig br0 up
# ip addr show br0   # 检查是否获得了期望的 IP 地址

三、 Keepalived 高可用配置：让 VIP 像风一样漂移

A. 主节点配置示例

# cat /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
    state MASTER
    interface br0               # 使用上面创建的桥接接口
    virtual_router_id 51        # 同一组内必须唯一
    priority 150                # 主节点优先级最高
    advert_int 1                # 心跳间隔秒数
    auntication {
        auth_type PASS
        auth_pass 1234abcd     # 强度适中即可，生产环境请自行加固
    }
    virtual_ipaddress {
        192.168.10.100/24 dev br0 label br0:vip   # 虚拟IP地址
    }
}

B. 备份节点配置示例

# cat /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
    state BACKUP
    interface br0
    virtual_router_id 51
    priority 100                # 稍低于 MASTER 即可自动切换
    advert_int 1
    auntication {
        auth_type PASS
        auth_pass 1234abcd
    }
    virtual_ipaddress {
        192.168.10.100/24 dev br0 label br0:vip
    }
}

保存后施行：

# systemctl restart keepalived && systemctl enable keepalived
# ip addr show br0 | grep vip   # 确认 VIP 已经挂载成功

四、Docker Swarm 与 Overlay 网络：容器世界的桥梁

1️⃣ 初始化 Swarm 集群

# docker swarm init --advertise-addr 192.168.10.101   # 主节点 IP 
# docker swarm token worker   # 获取加入令牌，复制下来备用 

2️⃣ 加入工作节点

# docker swarm join --token SWMTKN-1-xxxxxx \
      192.168.10.101:2377   # 主节点 IP + Swarm 管理端口 

3️⃣ 创建全局可用的 Overlay 网络

# docker network create \
      --driver overlay \
      --subnet 10.20.0.0/16 \
      --gateway 10.20.0.1 \
      overlay_net

好吧好吧... 此时无论容器跑在哪台机器上，它们都拥有同一个二层子网，互相 ping 通不再是梦。

五、 部署 Nginx 容器并绑定 VIP 实现负载均衡

a) 启动两个 Nginx 实例

# docker run -d --name web01 \
      --network overlay_net \
      nginx:stable-alpine
# docker run -d --name web02 \
      --network overlay_net \
      nginx:stable-alpine

b) 使用 HAProxy 或 Keepalived 的 “real server” 功能进行流量分发

If you prefer Keepalived LVS mode:，尊嘟假嘟？

# cat /etc/keepalived/keepalived.conf
virtual_server 192.168.10.100 80 {
    delay_loop 6          # 检测间隔秒数  
    lb_algo rr           # round-robin 简单易懂  
    lb_kind NAT          # 基于 NAT 的 LVS  
    real_server 10.20.x.x*.101 80 {   # 替换为实际容器 IP 
        weight 1 
        TCP_CHECK { connect_timeout 10 }
    }
    real_server 10.20.x.x*.102 80 { 
        weight 1 
        TCP_CHECK { connect_timeout 10 }
     }
}

⚠️ 请务必将 “real_server” 中的 IP 替换为 Docker 容器真实 IP，可通过 `docker inspect -f 盘它... '{{range .NetworkSettings.Networks}}{{ .IPAddress }}{{end}}' web01` 获得。

六、验证整个链路：从 VIP 到容器，一路通畅！

• PING VIP：

# ping -c4 192.168..10.100.
// 若出现 “64 bytes from … icmp_seq=… ttl=…” 则说明 VRRP 正常工作。

• CURL 测试 HTTP：

# curl http://192.168..10.100/
...
若页面内容显示 Nginx 默认欢迎页，则说明请求已经成功落到某个容器上。
DDoS 模拟压测：

温馨提醒：

压测前请确保业务数据已做好备份； 
Cron 作业最好设定在业务低谷期； 
Mysql 表结构迁移时请使用 pt‑online‑schema‑change 等工具。
ECS 实例若启用了平安组，请同步开放上述端口。
SLA 达不到时请检查 MTU 与 VXLAN 隧道是否匹配。
​



©2026 MyTech Blog | All Rights Reserved.