ipvsadm [子命令] [参数] [目标/值]

# 1. 清空旧规则（实验前必做）
ipvsadm -C

# 2. 创建 TCP 虚拟服务（VIP:80，加权轮询）
ipvsadm -A -t 192.168.8.30:80 -s wrr

# 3. 添加 RS（DR 模式，权重 2）
ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.21:80 -g -w 2

# 4. 添加 RS（DR 模式，权重 1）
ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.22:80 -g -w 1

# 5. 保存规则（防止重启丢失）
ipvsadm -S > /etc/ipvsadm.rules

# 6. 查看规则（验证配置）
ipvsadm -Ln

# 所有Ubuntu服务器都要操作
# 1. 更新apt源
sudo apt update 

# 2. 更新系统
sudo apt upgrade -y

# 3. 关闭防火墙（实验简化，生产需精细化配置）
sudo ufw disable
sudo systemctl stop ufw
sudo systemctl disable ufw

# 4. 关闭 swap（优化性能）
sudo swapoff -a
sudo sed -i '/swap/s/^/#/' /etc/fstab

# 5. 关闭 AppArmor（避免干扰）
sudo systemctl stop apparmor
sudo systemctl disable apparmor

# 6. 配置主机名（可选，便于区分）
# DS 节点：sudo hostnamectl set-hostname lvs-ds
# RS1 节点：sudo hostnamectl set-hostname lvs-rs1
# RS2 节点：sudo hostnamectl set-hostname lvs-rs2

# 7. 配置 hosts 解析（所有节点添加）
sudo tee -a /etc/hosts <<EOF
# LVS 实验节点
192.168.8.20 lvs-ds    # DS 节点外网 IP
192.168.8.21 lvs-rs1   # RS1 节点外网 IP（DR/TUN 模式用）
192.168.8.22 lvs-rs2   # RS2 节点外网 IP（DR/TUN 模式用）
10.0.0.1 lvs-ds-inner  # DS 节点内网 IP（NAT 模式用）
10.0.0.21 lvs-rs1-inner # RS1 节点内网 IP（NAT 模式用）
10.0.0.22 lvs-rs2-inner # RS2 节点内网 IP（NAT 模式用）
EOF

# 仅在DS调度服务器配置
sudo apt install -y ipvsadm iproute2  net-tools tcpdump

# 8. ipvsadm 规则持久化（Ubuntu 22.04 无默认服务，手动创建）
sudo tee /etc/systemd/system/ipvsadm.service <<EOF
[Unit]
Description=IPVSADM Rule Loader
After=network.target

[Service]
Type=oneshot
ExecStart=/sbin/ipvsadm -R < /etc/ipvsadm.rules
ExecStop=/sbin/ipvsadm -S > /etc/ipvsadm.rules
RemainAfterExit=yes

[Install]
WantedBy=multi-user.target
EOF

# 9. 启用持久化服务
sudo systemctl daemon-reload
sudo systemctl enable ipvsadm

sudo apt install -y iproute2 nginx net-tools tcpdump

# RS1 节点
sudo rm -f /var/www/html/index.nginx-debian.html
sudo tee /var/www/html/index.html <<EOF
<h1>Real Server 1 (192.168.8.21 / 10.0.0.21)</h1>
EOF

# RS2 节点
sudo rm -f /var/www/html/index.nginx-debian.html
sudo tee /var/www/html/index.html <<EOF
<h1>Real Server 2 (192.168.8.22 / 10.0.0.22)</h1>
EOF

# 启动 nginx 并设置开机自启
sudo systemctl start nginx
sudo systemctl enable nginx

# 验证 nginx 可用性（本地访问）
curl http://127.0.0.1

# 编辑 netplan 配置文件（文件名可能为 00-installer-config.yaml）
sudo tee /etc/netplan/00-installer-config.yaml <<EOF
network:
  ethernets:
    ens33:  # 外网网卡
      addresses:
        - 192.168.8.20/24
    ens34:  # 内网网卡
      addresses:
        - 10.0.0.1/24
  version: 2
EOF

# 应用网络配置
sudo netplan apply

# 验证网卡配置
ip addr show ens33
ip addr show ens34

# 临时开启
sudo sysctl -w net.ipv4.ip_forward=1

# 永久开启
sudo tee -a /etc/sysctl.conf <<EOF
net.ipv4.ip_forward = 1
EOF
sudo sysctl -p

# 清空旧规则
sudo ipvsadm -C

# 添加 VIP 虚拟服务（ens33 外网 IP:80 端口，轮询算法）
sudo ipvsadm -A -t 192.168.8.20:80 -s rr

# 添加 RS 节点（NAT 模式用 -m 参数，指定 RS 内网 IP）
sudo ipvsadm -a -t 192.168.8.20:80 -r 10.0.0.21:80 -m
sudo ipvsadm -a -t 192.168.8.20:80 -r 10.0.0.22:80 -m

# 保存规则
sudo ipvsadm -S > /etc/ipvsadm.rules

# 验证规则
sudo ipvsadm -Ln

# 编辑 RS1 节点 netplan 配置文件
sudo tee /etc/netplan/00-installer-config.yaml <<EOF
network:
  ethernets:
    ens33:  # 禁用外网网卡
      dhcp4: no
      dhcp6: no
    ens34:  # 配置内网网卡
      addresses:
        - 10.0.0.21/24
      routes:
        - to: 0.0.0.0/0
          via: 10.0.0.1  # 指向 DS 内网 IP
  version: 2
EOF

# RS2 节点仅需修改 addresses 为 10.0.0.22/24，其余相同
# sudo tee /etc/netplan/00-installer-config.yaml <<EOF
# network:
#   ethernets:
#     ens33:
#       dhcp4: no
#       dhcp6: no
#     ens34:
#       addresses:
#         - 10.0.0.22/24
#       routes:
#         - to: 0.0.0.0/0
#           via: 10.0.0.1
#   version: 2
# EOF

# 应用配置并验证
sudo netplan apply
ip route show default  # 验证网关是否为 10.0.0.1
ip addr show ens34     # 验证内网 IP 配置正确

for i in {1..5}; do curl http://192.168.8.20; echo -e "\n"; done

# 配置 VIP（临时生效，重启失效）
sudo ip addr add 192.168.8.30/32 dev lo label lo:0

# 启用 lo 接口（确保接口活跃）
sudo ip link set lo up

# 验证 VIP 配置
ip addr show lo  # 查看 lo 接口是否有 192.168.8.30/32 地址

# 临时配置
sudo sysctl -w net.ipv4.conf.all.arp_ignore=1
sudo sysctl -w net.ipv4.conf.all.arp_announce=2
sudo sysctl -w net.ipv4.conf.lo.arp_ignore=1
sudo sysctl -w net.ipv4.conf.lo.arp_announce=2
sudo sysctl -w net.ipv4.conf.all.rp_filter=0
sudo sysctl -w net.ipv4.conf.lo.rp_filter=0
sudo sysctl -w net.ipv4.conf.ens33.rp_filter=0  # 针对外网网卡关闭反向路径过滤

# 永久配置
sudo tee -a /etc/sysctl.conf <<EOF
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.rp_filter = 0
net.ipv4.conf.lo.rp_filter = 0
net.ipv4.conf.ens33.rp_filter = 0
EOF
sudo sysctl -p

# 清空旧规则
sudo ipvsadm -C

# 添加 VIP 虚拟服务（DR 模式用 -g 参数，指定 VIP:80）
sudo ipvsadm -A -t 192.168.8.30:80 -s rr

# 添加 RS 节点（指定 RS 物理 IP，DR 模式 -g）
sudo ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.21:80 -g
sudo ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.22:80 -g

# 保存规则
sudo ipvsadm -S > /etc/ipvsadm.rules

# 验证规则
sudo ipvsadm -Ln

for i in {1..5}; do curl http://192.168.8.30; echo -e "\n"; done

# 临时加载
sudo modprobe ipip

# 验证模块加载成功
lsmod | grep ipip  # 输出 ipip 相关内容则成功

# 永久加载（重启生效）
sudo tee -a /etc/modules-load.d/ipip.conf <<EOF
ipip
EOF

# 创建隧道接口（指定本地物理 IP 为 DS 的 ens33 IP）
sudo ip tunnel add tunl0 mode ipip local 192.168.8.20 remote any
sudo ip link set tunl0 up
sudo ip addr add 192.168.8.30/32 dev tunl0

# 验证隧道配置
ip tunnel show tunl0  # 查看隧道状态
ip addr show tunl0    # 查看 VIP 配置

# 清空旧规则
sudo ipvsadm -C

# 添加 VIP 虚拟服务（TUN 模式用 -i 参数）
sudo ipvsadm -A -t 192.168.8.30:80 -s rr

# 添加 RS 节点（TUN 模式 -i，指定 RS 物理 IP）
sudo ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.21:80 -i
sudo ipvsadm -a -t 192.168.8.30:80 -r 192.168.8.22:80 -i

# 保存规则
sudo ipvsadm -S > /etc/ipvsadm.rules

# 验证规则
sudo ipvsadm -Ln

# 1. 创建 IPIP 隧道（RS1 用自身 ens33 IP 作为本地 IP）
sudo ip tunnel add tunl0 mode ipip local 192.168.8.21 remote any
sudo ip link set tunl0 up
sudo ip addr add 192.168.8.30/32 dev tunl0

# RS2 节点创建隧道命令（替换本地 IP 为 192.168.8.22）
# sudo ip tunnel add tunl0 mode ipip local 192.168.8.22 remote any
# sudo ip link set tunl0 up
# sudo ip addr add 192.168.8.30/32 dev tunl0

# 2. 禁用 ARP + 关闭反向路径过滤（适配 tunl0 隧道接口）
sudo sysctl -w net.ipv4.conf.all.arp_ignore=1
sudo sysctl -w net.ipv4.conf.all.arp_announce=2
sudo sysctl -w net.ipv4.conf.tunl0.arp_ignore=1
sudo sysctl -w net.ipv4.conf.tunl0.arp_announce=2
sudo sysctl -w net.ipv4.conf.all.rp_filter=0
sudo sysctl -w net.ipv4.conf.tunl0.rp_filter=0
sudo sysctl -w net.ipv4.conf.ens33.rp_filter=0

# 3. 永久配置
sudo tee -a /etc/sysctl.conf <<EOF
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.tunl0.arp_ignore = 1
net.ipv4.conf.tunl0.arp_announce = 2
net.ipv4.conf.all.rp_filter = 0
net.ipv4.conf.tunl0.rp_filter = 0
net.ipv4.conf.ens33.rp_filter = 0
EOF
sudo sysctl -p

# 4. 验证隧道和 VIP
ip tunnel show tunl0
ip addr show tunl0

for i in {1..5}; do curl http://192.168.8.30; echo -e "\n"; done