Keealived+LVS 维护技巧与调优
【Keealived+LVS负载均衡部署问题排错思路】1、iptables防火墙问题
iptalbes防火墙会造成Clinet用户、Director和Rs真实服务器3者之间两者任意连接有问题，在部署过程中，我们最好配置防火墙允许LAN内所有IP互相访问。即内网都互通，如果是学习测试环境，建议把iptables防火墙关掉测试，Directors之间的failover切换也会被防火墙影响，而导致LVS Director两边启动VIP发生裂脑
2、LINUX负载均衡器转发问题
对于NAT模式，Linux内核转发及iptables转发功能需要开发，对于DR模式负载均衡，转发模式可以不打开
3、RS端抑制ARP问题
这个经常被忘记执行，要注意，每个RS端都要搞，我们习惯通过一个脚本来执行，例如:lvs
4、RS端lo上绑定业务VIP，多业务VIP，每个RS都要绑定
这个经常被忘记执行，要注意，每个RS端都要搞，我们习惯通过一个脚本来执行，例如：ipvs_client，特别是当一个RS被多个负载均衡器转发时，会配多个VIP
5、RS端lo上绑定的业务VIP，有时lo接口VIP会丢失，例如执行/etc/init.d/network restart后
解决办法：
1、lvs完整脚本启动命令放入/etc/local
2、把RS端lo绑定的业务VIP做成网卡配置文件提供服务如/etc/sysconfig/network-scripts/ifcfg-lo:181
3、修改/etc/init.d/network 脚本，让重启network时也把lvs脚本启动
6、ipvsadm -L -n 检查LVS真实服务器情况及 VIP 连接及配置
7、检查Keepalived配置文件（主从的不同）
单实例主从模式区别：主从配置文件的区别是 （route_id，state，priorities）
8、查看系统日志/var/log/messages
对于LVS负载均衡来说，系统日志/var/log/messages很重要，要随时保持查看日志的习惯
9、通过tcpdump跟踪数据包流向
tcpdump非常强大，在各种场合都可以使用，这里也不例外。例：在RS监控来自Director的数据流信息
tcpdump -nnn -i eth1 -s 10000 -A host 192.168.1.1 and port 80
tcpdump -i eth0 -nn 'port 52114 and src host 192.168.1.1'
10、注意LVS配置语法，尤其是大括号问题，要成对出现，可以写个脚本来判断大括号是不是成对
【Keepalived+LVS生产环境负载均衡维护思路】
对于一个有数十个实例的负载均衡keepalived.conf维护确实不是很容易的事情
1、业务高峰期尽量不修改负载均衡配置，以免发生故障影响用户体验
2、修改keepalived.conf时，执行临时备份操作/bin/cp keepalived.conf keepalived.conf.20160610
3、修改keepalived.conf时，把两个负均衡器的改名标识好，然后下载下来，保留原始的配置，然后复 制出新两份配置，改好一份后，然后通过比较工具来比较修改另一份，线上用vimdiff也可以
4、替换正式配置文件后，主负载均衡器可以先执行/etc/keepalived stop,把业务切到备份负载均衡器 上，也可以直接执行/etc/init.d/keepalived restart重启直接让主生效，如果发现异常，立即 stop,或者用事先准备好的命令恢复，例如：
重启后立刻检查业务是否正常，可以浏览器访问或者Linux下wget业务地址，如果发现问题立即用事 先准备好的恢复命令恢复，或者停止keepalived，把业务切到未修改的备机上，然后查看主负均服务 器的配置
/etc/init.d/keepalived restart
wget http://www.wsyht.com （检查不在负载均衡器上）
事先准备好的恢复命令
/bin/cp keepalived.conf /bin/cp keepalived.conf.new
/bin/cp keepalived.conf.2016.06.19 keepalived.conf
/etc/init.d/keepalived restart
主负均衡器调整好之后，备份负载均衡器直接执行/etc/init.d/keepalived restart 重启直接生 效，如果有必要刻意过下切换分别测试下，以免配置不对导致以后自动切换时异常
【LVS性能调忧】
1、关闭iptables时，换硬件防火墙
大流量时，iptables是一个性能瓶颈，关闭或换硬件防火墙
2、内核优化
3、网卡优化
增加LVS主机的网络吞吐能力，有利于提高LVS的处理速度和能力
1、使用更快的网卡，比如使用千兆，万兆的网卡
2、可以进一步将两块或多块网卡绑定（多块网卡的绑定有待验证）
4、TCP/IP优化
net.core.netdev_max_backlog = 65000
5、硬件优化
IPVS的运行，使用的服务器资源主要是CPU、内存I/O，网络I/O；IPVS完全运行在内存中，并且运行 在内核上
当IPVS的应用在DR模式时，即不耗CPU，也不耗I/O，运行非常快，所以系统负载非常的低，所以LVS 应用服务器的配置要求非常低，以为LVS很重要，所以配置一个相当高端的服务器，实在是一种浪 费，只要服务器稳定就好，例如：
生产环境负载均衡集群系统架构设备选购案例
选项的依据：价格、性能、冗余
6、增大哈希表，调到 ip_vs_conn_tab_bits 到20
通过重启，向内核传递参数来调整，在引导程序的kernel相关的配置行上，添加： ip_vs_conn_tab_bits=20，然后，重启
页:
[1]