LVS + keepalived ，real server web测试刷新不能切换

xu_liuzhen

我使用LVS + keepalived 实现高可用负载均衡，在测试real server 的web负载均衡情况的时候，在浏览器输入VIP页面不能打开。下面是我的一些配置，还请大家帮忙看看，非常感谢！！！
（使用真实机测试）

Director Server IP：192.168.1.125
BACKUP server IP：192.168.1.126
VIP: 192.168.1.240
real_server1 IP: 192.168.1.122
real_server2 IP: 192.168.1.124



Director Server 的 keepalived.conf 配置文件：

! Configuration File for keepalived

global_defs {
   notification_email {
          liuzhen424@gmail.com
        xu_liuzhen@163.com  
  }
   notification_email_from keepalived@localhost
   smtp_server 192.168.200.1
   smtp_connect_timeout 30
   router_id LVS_DEVEL
}

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.1.240
    }
}

virtual_server 192.168.1.240 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    nat_mask 255.255.255.255
    persistence_timeout 50
    protocol TCP

    real_server 192.168.1.122 80 {
        weight 3
        SSL_GET {
            url {
              path /
              digest ff20ad2481f97b1754ef3e12ecd3a9cc
            }
            url {
              path /mrtg/
              digest 9b3a0c85a887a256d6939da88aabd8cd
            }
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }


        real_server 192.168.1.124 80 {
        weight 3
        SSL_GET {
            url {
              path /
              digest ff20ad2481f97b1754ef3e12ecd3a9cc
            }
            url {
              path /mrtg/
              digest 9b3a0c85a887a256d6939da88aabd8cd
            }
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
}

Director Server  启动配置脚本：

#!/bin/sh
# description: Start LVS of Director server
VIP=192.168.1.240
RIP1=192.168.1.122
RIP2=192.168.1.124
#./etc/rc.d/init.d/functions
case "$1" in
    start)
                echo " start LVS of Director Server"
# set the Virtual  IP Address and sysctl parameter
                /sbin/ifconfig eth0:0 $VIP broadcast $VIP netmask 255.255.255.255 up
                echo "1" >/proc/sys/net/ipv4/ip_forward
#Clear IPVS table
                /sbin/ipvsadm -C
#set LVS
                /sbin/ipvsadm -A -t $VIP:80 -s rr
                /sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -g
                /sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -g
#Run LVS
                /sbin/ipvsadm
                ;;
        stop)
            echo "close LVS Directorserver"
            echo "0" >/proc/sys/net/ipv4/ip_forward
            /sbin/ipvsadm -C
            /sbin/ifconfig eth0:0 down
            ;;
           *)
            echo "Usage: $0 {start|stop}"
            exit 1
        esac



real server 配置脚本：

#!/bin/bash
VIP=192.168.1.240
/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up
/sbin/route add -host $VIP dev lo:0
echo “1″ >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo “2″ >/proc/sys/net/ipv4/conf/lo/arp_announce
echo “1″ >/proc/sys/net/ipv4/conf/all/arp_ignore
echo “2″ >/proc/sys/net/ipv4/conf/all/arp_announce
sysctl -p
#end

测试real server  的web负载的时候在局域网其他机器的浏览器里输入http://192.168.1.240  只能显示某个页面，就是只能连接的某一台realserver，不能实现刷新切换显示。在同一台机子上只能显示一个，如果换个机子可以显示出另一个realserver，但是只是这个，不能出现刷新切换的效果。

还请大牛们看看，非常感谢

wenhq

ipvsadm -ln输出看下。

xu_liuzhen

[root@localhost init.d]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddressort Scheduler Flags
  -> RemoteAddressort           Forward Weight ActiveConn InActConn
TCP  192.168.1.240:80 rr
  -> 192.168.1.122:80             Route   1      0          0         
  -> 192.168.1.124:80             Route   1      0          0  

回复 2# wenhq


   

wenhq

再次确认下realserver 上的lo:0 配置是否成功。还有arp_announce之类的参数设置。



还有你可以在vip server 及 real server上tcpdump 抓包看看。

每次测试的时候 ，输出下ipvsadm -ln.

wenhq

再提供一下2个机器的Keepalived.conf 和ifconfig -a

chenzhj

这应该同你的算法有关

xu_liuzhen

谢谢各位，我好像发现问题了，是我的旧配置脚本中这句：/sbin/ipvsadm -A -t $VIP:80 -s rr  后面加了-p 60  导致一分钟内的请求全部指向一个real server 了。
十分感谢各位的热心帮助，不过现在还有个小问题，就是刷新可以出现两个real server 的web服务切换了，但是 在配置文件相同，权重相同的情况下，基本有超过90%的请求都到real server 1 了，负载不均衡，这个不知道是什么情况？还请各位遇到过此类情况的，或者知道原理的大神么讲解下。小弟在这里谢过了~~~~

wenhq

rr 算法跟realserver load 关系不大吧？
你每测一次输出ipvsadm

xiaodylan

做测试访问 然后再real上查看连接是否过来了？
回复 8# xu_liuzhen