借助LVS+Keepalived实现负载均衡
借助LVS+Keepalived实现负载均衡
在互联网高并发场景下，单台服务器的处理能力有限，负载均衡技术成为提升系统可用性和扩展性的关键。LVS（Linux Virtual Server）是Linux内核原生的负载均衡方案，而Keepalived则为其提供高可用性保障。本文将深入剖析LVS+Keepalived的工作原理，并结合可运行代码示例，展示如何构建一个稳定、高效的负载均衡系统。### 1. LVS原理深度解析LVS工作于Linux内核的Netfilter框架之上，通过IPVS（IP Virtual Server）模块实现四层（传输层）负载均衡。它主要运行在调度器（Director）上，将客户端请求分发到后端的真实服务器（Real Server）。LVS支持三种工作模式：-NAT模式：调度器修改请求和目标IP，类似路由器转发。真实服务器响应需经过调度器，适合小规模部署。-TUN模式：通过IP隧道封装请求，真实服务器直接响应客户端，性能高但配置复杂。-DR模式：调度器仅修改MAC地址，真实服务器直接响应，性能最优，是最常用模式。LVS的核心调度算法包括：-轮询（RR）：依次分发请求，简单公平。-加权轮询（WRR）：根据服务器权重分配。-最少连接（LC）：分发到连接数最少的服务器。-源地址哈希（SH）：确保同一客户端请求总是到同一服务器，用于会话保持。Keepalived作为高可用组件，通过VRRP（虚拟路由冗余协议）实现调度器的主备切换。它监控LVS状态，一旦主节点故障，备份节点立即接管VIP（虚拟IP），保证服务不中断。### 2. 环境搭建与配置我们将搭建一个基于LVS DR模式的负载均衡系统，包含两台调度器和两台真实服务器。环境假设：- 调度器：主节点IP 192.168.1.10，备节点IP 192.168.1.11，VIP 192.168.1.100- 真实服务器：RS1 IP 192.168.1.20，RS2 IP 192.168.1.21，运行简单HTTP服务#### 2.1 安装必要软件在调度器上安装ipvsadm和keepalived：bash# 主调度器yum install -y ipvsadm keepalived# 备调度器同样安装在真实服务器上安装Nginx（作为示例服务）：bashyum install -y nginxsystemctl start nginx#### 2.2 配置真实服务器真实服务器需配置回环接口上的VIP，并抑制ARP响应，避免直接响应客户端的ARP请求。创建配置脚本/etc/init.d/realserver：bash#!/bin/bash# 真实服务器配置脚本VIP=192.168.1.100case "$1" instart) echo "Starting LVS Real Server..." # 配置回环接口上的VIP ifconfig lo:0 $VIP netmask 255.255.255.255 up # 抑制ARP响应，防止与调度器冲突 echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce ;;stop) echo "Stopping LVS Real Server..." ifconfig lo:0 down echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce ;;*) echo "Usage: $0 {start|stop}" exit 1esac在两台真实服务器上运行：/etc/init.d/realserver start### 3. Keepalived配置详解Keepalived不仅管理VRRP，还能动态维护LVS规则。以下是主调度器的配置文件/etc/keepalived/keepalived.conf：bash! Configuration File for keepalivedglobal_defs { notification_email { admin@example.com } router_id LVS_DEVEL}vrrp_instance VI_1 { state MASTER # 主节点为MASTER，备节点为BACKUP interface eth0 # 网络接口 virtual_router_id 51 # 虚拟路由ID，主备需一致 priority 100 # 优先级，主节点高于备节点 advert_int 1 # 心跳间隔1秒 authentication { auth_type PASS auth_pass 1234 # 认证密码 } virtual_ipaddress { 192.168.1.100 # VIP地址 }}virtual_server 192.168.1.100 80 { delay_loop 6 # 健康检查间隔 lb_algo rr # 轮询算法 lb_kind DR # 使用DR模式 persistence_timeout 600 # 会话保持时间 protocol TCP real_server 192.168.1.20 80 { weight 1 TCP_CHECK { connect_timeout 3 nb_get_retry 3 delay_before_retry 3 } } real_server 192.168.1.21 80 { weight 1 TCP_CHECK { connect_timeout 3 nb_get_retry 3 delay_before_retry 3 } }}备调度器的配置类似，只需将state改为BACKUP，priority设为99。启动Keepalived服务：bashsystemctl start keepalivedsystemctl enable keepalived### 4. 验证与测试使用ipvsadm命令查看LVS状态：bashipvsadm -L -n输出示例：IP Virtual Server version 1.2.1 (size=4096)Prot LocalAddress:Port Scheduler Flags -> RemoteAddress:Port Forward Weight ActiveConn InActConnTCP 192.168.1.100:80 rr persistent 600 -> 192.168.1.20:80 Route 1 0 0 -> 192.168.1.21:80 Route 1 0 0用curl模拟客户端请求：bashcurl http://192.168.1.100多次请求应看到不同真实服务器的响应。测试高可用性时，停掉主调度器Keepalived服务，备份节点应接管VIP，服务仍正常。### 5. 性能优化与常见问题-ARP问题：DR模式下，真实服务器必须抑制ARP，否则客户端可能直接访问真实服务器IP，破坏负载均衡。-会话保持：使用persistence_timeout或源地址哈希算法，确保同一用户请求分发到同一服务器。-健康检查：Keepalived的TCP_CHECK可检测TCP端口，也可用HTTP_GET检查HTTP状态码。-日志监控：查看/var/log/messages或/var/log/keepalived.log调试VRRP切换问题。### 总结LVS+Keepalived组合提供了四层负载均衡的高可用方案，其中LVS在内核层面高效分发流量，Keepalived确保调度器故障时服务不中断。通过DR模式，真实服务器直接响应客户端，大幅降低调度器压力。本文涵盖从原理到配置的完整流程，并提供了可运行代码示例。实践中，合理调整调度算法和健康检查参数，可应对大多数高并发场景。建议在测试环境验证后，再部署到生产系统，确保稳定运行。