一、haproxy简介
HAProxy是一款提供高可用性、负载均衡以及基于TCP&＃xff08;第四层&＃xff09;和HTTP&＃xff08;第七层&＃xff09;应用的代理软件&＃xff0c;HAProxy是完全免费的、借助HAProxy可以快速并且可靠的提供基于TCP和HTTP应用的代理解决方案。
&＃xff08;1&＃xff09;免费开源&＃xff0c;稳定性也是非常好&＃xff0c;这个可通过我做的一些小项目可以看出来&＃xff0c;单Haproxy也跑得不错&＃xff0c;稳定性可以与硬件级的F5相媲美&＃xff1b;
&＃xff08;2&＃xff09;根据官方文档&＃xff0c;HAProxy可以跑满10Gbps-New benchmark of HAProxy at 10 Gbps using Myricom&＃39;s 10GbE NICs &＃xff08;Myri-10G PCI-Express&＃xff09;&＃xff0c;这个数值作为软件级负载均衡器是相当惊人的&＃xff1b;
&＃xff08;3&＃xff09;HAProxy 支持连接拒绝&＃xff1a;因为维护一个连接的打开的开销是很低的&＃xff0c;有时我们很需要限制攻击蠕虫&＃xff08;attack bots&＃xff09;&＃xff0c;也就是说限制它们的连接打开从而限制它们的危害。这个已经为一个陷于小型DDoS攻击的网站开发了而且已经拯救了很多站点&＃xff0c;这个优点也是其它负载均衡器没有的。
&＃xff08;4&＃xff09;HAProxy 支持全透明代理&＃xff08;已具备硬件防火墙的典型特点&＃xff09;&＃xff1a;可以用客户端IP地址或者任何其他地址来连接后端服务器&＃xff1b;这个特性仅在Linux 2.4/2.6内核打了cttproxy补丁后才可以使用&＃xff1b;这个特性也使得为某特殊服务器处理部分流量同时又不修改服务器的地址成为可能。
&＃xff08;5&＃xff09;HAProxy现多于线上的Mysql集群环境&＃xff0c;我们常用于它作为MySQL&＃xff08;读&＃xff09;负载均衡&＃xff1b;
&＃xff08;6&＃xff09;自带强大的监控服务器状态的页面&＃xff0c;实际环境中我们结合Nagios进行邮件或短信报警&＃xff1b;
&＃xff08;7&＃xff09;HAProxy支持虚拟主机。
HAProxy特别适用于那些负载特大的web站点&＃xff0c;这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上&＃xff0c;完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中&＃xff0c; 同时可以保护你的web服务器不被暴露到网络上。
在功能上&＃xff0c;能以proxy反向代理方式实现WEB均衡负载&＃xff0c;这样的产品有很多。包括lvs&＃xff0c;Nginx&＃xff0c;ApacheProxy&＃xff0c;lighttpd等。
国内生产环境上使用Haproxy的公司很多&＃xff0c;例如淘宝的CDN系统
HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理&＃xff0c;支持虚拟主机&＃xff0c;它是免费、快速并且可靠的一种解决方案。基于合理的配置及优化&＃xff0c;完全可以实现单机支持数以万计的并发连接。
HAProxy支持2种主要的代理模式&＃xff1a;第一种代理模式是"tcp"&＃xff0c;即OSI网络模型中的第4层传输层协议&＃xff1b;第二种代理模式是“http”&＃xff0c;即OSI网络模型中的第7层应用层协议。在tcp模式下&＃xff0c;HAProxy支持在客户端和服务器之间双向转发流量。http模式下&＃xff0c;HAProxy进行协议分析&＃xff0c;能够针对分析结果和用户配置来决定允许、拒绝、交换、增加、修改等工作策略。
二、haproxy的安装
1、yum安装
第一步&＃xff1a;下载
[root&＃64;ren4 ~]# yum -y install haproxy
第二步&＃xff1a;启动
[root&＃64;ren4 ~]# systemctl restart haproxy
第三步&＃xff1a;查看是否启动成功&＃xff08;默认监听5000端口&＃xff0c;可修改为80端口&＃xff09;
[root&＃64;ren4 haproxy]# lsof -i :5000
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
haproxy 38195 haproxy 5u IPv4 114916 0t0 TCP *:commplex-main (LISTEN)
haproxy的配置文件&＃xff1a;
[root&＃64;ren4 haproxy]# rpm -qc haproxy
/etc/haproxy/haproxy.cfg
/etc/logrotate.d/haproxy
/etc/sysconfig/haproxy
三、haproxy添加后端节点
[root&＃64;ren4 haproxy]# vim /etc/haproxy/haproxy.cfg
backend app
balance roundrobin
server app5 192.168.11.5:80 weight 1
server app6 192.168.11.6:80 weight 3
[root&＃64;ren4 haproxy]# systemctl restart haproxy
[root&＃64;ren4 haproxy]# firewall-cmd --add-port&＃61;5000/tcp
success
四、后端节点准备测试文件及测试结果
节点1&＃xff1a;192.168.11.5
[root&＃64;ren5 ~]# echo "this is 5" > /var/www/html/index.html
[root&＃64;ren5 ~]# systemctl restart httpd
[root&＃64;ren5 ~]# firewall-cmd --add-port&＃61;80/tcp
节点2&＃xff1a;192.168.11.6
[root&＃64;ren6 html]# echo "this is 6" > /var/www/html/index.html
[root&＃64;ren6 html]# systemctl restart httpd
[root&＃64;ren6 html]# firewall-cmd --add-port&＃61;80/tcp
success
测试结果&＃xff1a;
五、haproxy监控web显示配置
在defaults后添加以下的内容&＃xff1a;
1 defaults
2 stats refresh 30s #统计页面自动刷新时间
3 stats uri /stats #统计页面url&＃xff08;注意stats后是uri&＃xff09;
4 stats realm baison-test-Haproxy #统计页面密码框上提示文本
5 stats auth admin:123 #统计页面用户名和密码设置
6 stats hide-version #隐藏统计页面上HAProxy的版本信息
浏览器访问结果&＃xff1a;
六、haproxy负载均衡算法
一、roundrobin&＃xff0c;表示简单的轮询&＃xff0c;每个服务器根据权重轮流使用&＃xff0c;在服务器的处理时间平均分配的情况下这是最流畅和公平的算法。该算法是动态的&＃xff0c;对于实例启动慢的服务器权重会在运行中调整。二、static-rr&＃xff0c;表示根据权重&＃xff0c;建议关注&＃xff1b;每个服务器根据权重轮流使用&＃xff0c;类似roundrobin&＃xff0c;但它是静态的&＃xff0c;意味着运行时修改权限是无效的。另外&＃xff0c;它对服务器的数量没有限制。三、leastconn&＃xff0c;表示最少连接者先处理&＃xff0c;建议关注&＃xff1b;leastconn建议用于长会话服务&＃xff0c;例如LDAP、SQL、TSE等&＃xff0c;而不适合短会话协议。如HTTP.该算法是动态的&＃xff0c;对于实例启动慢的服务器权重会在运行中调整。四、source&＃xff0c;表示根据请求源IP&＃xff0c;建议关注&＃xff1b;对请求源IP地址进行哈希&＃xff0c;用可用服务器的权重总数除以哈希值&＃xff0c;根据结果进行分配。只要服务器正常&＃xff0c;同一个客户端IP地址总是访问同一个服务器。如果哈希的结果随可用服务器数量而变化&＃xff0c;那么客户端会定向到不同的服务器&＃xff1b;该算法一般用于不能插入COOKIE的Tcp模式。它还可以用于广域网上为拒绝使用会话COOKIE的客户端提供最有效的粘连&＃xff1b;该算法默认是静态的&＃xff0c;所以运行时修改服务器的权重是无效的&＃xff0c;但是算法会根据“hash-type”的变化做调整。
五、uri&＃xff0c;表示根据请求的URI&＃xff1b;表示根据请求的URI左端&＃xff08;问号之前&＃xff09;进行哈希&＃xff0c;用可用服务器的权重总数除以哈希值&＃xff0c;根据结果进行分配。只要服务器正常&＃xff0c;同一个URI地址总是访问同一个服务器。一般用于代理缓存和反病毒代理&＃xff0c;以最大限度的提高缓存的命中率。该算法只能用于HTTP后端&＃xff1b;该算法一般用于后端是缓存服务器&＃xff1b;该算法默认是静态的&＃xff0c;所以运行时修改服务器的权重是无效的&＃xff0c;但是算法会根据“hash-type”的变化做调整。
六、url_param&＃xff0c;表示根据请求的URl参数&＃39;balance url_param&＃39; requires an URL parameter name在HTTP GET请求的查询串中查找中指定的URL参数&＃xff0c;基本上可以锁定使用特制的URL到特定的负载均衡器节点的要求&＃xff1b;该算法一般用于将同一个用户的信息发送到同一个后端服务器&＃xff1b;该算法默认是静态的&＃xff0c;所以运行时修改服务器的权重是无效的&＃xff0c;但是算法会根据“hash-type”的变化做调整。
七、hdr(name)&＃xff0c;表示根据HTTP请求头来锁定每一次HTTP请求&＃xff1b;在每个HTTP请求中查找HTTP头
八、rdp-COOKIE(name)&＃xff0c;表示根据据COOKIE(name)来锁定并哈希每一次TCP请求。为每个进来的TCP请求查询并哈希RDP COOKIE
#其实这些算法各有各的用法&＃xff0c;我们平时应用得比较多的应该是roundrobin、source和lestconn。
七、haproxy acl定义
访问控制列表&＃xff08;ACL&＃xff0c;Access Control Lists&＃xff09;是应用在路由器&＃xff08;或三层交换机&＃xff09;接口上的指令列表&＃xff0c;用来告诉路由器哪些数据可以接收&＃xff0c;哪些数据是需要被拒绝并丢弃。
ACL的定义是基于协议的&＃xff0c;它适用于所有的路由协议&＃xff0c;如IP、IPX等。它在路由器上读取数据包头中的信息&＃xff0c;如源地址、目的地址、使用的协议、源端口、目的端口等&＃xff0c;并根据预先定义好的规则对包进行过滤&＃xff0c;从而达到对网络访问的精确、灵活控制。
########ACL策略定义#########################
1、#如果请求的域名满足正则表达式返回true -i是忽略大小写
acl denali_policy hdr_reg(host) -i ^(www.inbank.com|image.inbank.com)$2、#如果请求域名满足www.inbank.com 返回 true -i是忽略大小写
acl tm_policy hdr_dom(host) -i www.inbank.com3、#在请求url中包含sip_apiname&＃61;&＃xff0c;则此控制策略返回true,否则为false
acl invalid_req url_sub -i sip_apiname&＃61;#定义一个名为invalid_req的策略4、#在请求url中存在timetask作为部分地址路径&＃xff0c;则此控制策略返回true,否则返回false
acl timetask_req url_dir -i timetask5、#当请求的header中Content-length等于0时返回 true
acl missing_cl hdr_cnt(Content-length) eq 0#########acl策略匹配相应###################
1、#当请求中header中Content-length等于0 阻止请求返回403
block if missing_cl2、#block表示阻止请求&＃xff0c;返回403错误&＃xff0c;当前表示如果不满足策略invalid_req&＃xff0c;或者满足策略timetask_req&＃xff0c;则阻止请求。
block if !invalid_req || timetask_req3、#当满足denali_policy的策略时使用denali_server的backend
use_backend denali_server if denali_policy4、#当满足tm_policy的策略时使用tm_server的backend
use_backend tm_server if tm_policy5、#reqisetbe关键字定义&＃xff0c;根据定义的关键字选择backend
reqisetbe ^Host:\ img dynamic
reqisetbe ^[^\ ]*\ /(img|css)/ dynamic
reqisetbe ^[^\ ]*\ /admin/stats stats6、#以上都不满足的时候使用默认mms_server的backend
default_backend mms
八、编译安装的配置文件详解
###########全局配置#########
globallog 127.0.0.1 local2 #[日志输出配置&＃xff0c;所有日志都记录在本机&＃xff0c;通过local2输出]chroot /var/lib/haproxy #chroot运行路径pidfile /var/run/haproxy.pid #haproxy 进程PID文件maxconn 4000 #默认最大连接数,需考虑ulimit-n限制user haproxy #运行haproxy的用户group haproxy #运行haproxy的用户所在的组daemon #以后台形式运行harpoxy#nbproc 1 #设置进程数量#ulimit-n 819200 #ulimit 的数量限制#debug #haproxy 调试级别&＃xff0c;建议只在开启单进程的时候调试#quiet########默认配置############
defaultslog globalmode http #默认的模式mode { tcp|http|health }&＃xff0c;tcp是4层&＃xff0c;http是7层&＃xff0c;health只会返回OKoption httplog #日志类别,采用httplogoption dontlognull #不记录健康检查日志信息retries 2 #两次连接失败就认为是服务器不可用&＃xff0c;也可以通过后面设置#option forwardfor #如果后端服务器需要获得客户端真实ip需要配置的参数&＃xff0c;可以从Http Header中获得客户端ipoption httpclose #每次请求完毕后主动关闭http通道,haproxy不支持keep-alive,只能模拟这种模式的实现#option redispatch #当serverId对应的服务器挂掉后&＃xff0c;强制定向到其他健康的服务器&＃xff0c;以后将不支持option abortonclose #当服务器负载很高的时候&＃xff0c;自动结束掉当前队列处理比较久的链接maxconn 4096 #默认的最大连接数timeout connect 5000ms #连接超时timeout client 30000ms #客户端超时timeout server 30000ms #服务器超时#timeout check 2000 #心跳检测超时#timeout http-keep-alive10s #默认持久连接超时时间#timeout http-request 10s #默认http请求超时时间#timeout queue 1m #默认队列超时时间balance roundrobin #设置默认负载均衡方式&＃xff0c;轮询方式#balance source #设置默认负载均衡方式&＃xff0c;类似于nginx的ip_hash#balnace leastconn #设置默认负载均衡方式&＃xff0c;最小连接数########统计页面配置########
listen statsbind 0.0.0.0:1080 #设置Frontend和Backend的组合体&＃xff0c;监控组的名称&＃xff0c;按需要自定义名称mode http #http的7层模式option httplog #采用http日志格式#log 127.0.0.1 local0 err #错误日志记录maxconn 10 #默认的最大连接数stats refresh 30s #统计页面自动刷新时间stats uri /stats #统计页面urlstats realm XingCloud\ Haproxy #统计页面密码框上提示文本stats auth admin:admin #设置监控页面的用户和密码:admin,可以设置多个用户名stats auth Frank:Frank #设置监控页面的用户和密码&＃xff1a;Frankstats hide-version #隐藏统计页面上HAProxy的版本信息stats admin if TRUE #设置手工启动/禁用&＃xff0c;后端服务器(haproxy-1.4.9以后版本)########设置haproxy 错误页面#####
#errorfile 403 /home/haproxy/haproxy/errorfiles/403.http
#errorfile 500 /home/haproxy/haproxy/errorfiles/500.http
#errorfile 502 /home/haproxy/haproxy/errorfiles/502.http
#errorfile 503 /home/haproxy/haproxy/errorfiles/503.http
#errorfile 504 /home/haproxy/haproxy/errorfiles/504.http########frontend前端配置##############
frontend mainbind *:80 #这里建议使用bind *:80的方式&＃xff0c;要不然做集群高可用的时候有问题&＃xff0c;vip切换到其他机器就不能访问了。acl web hdr(host) -i www.abc.com #acl后面是规则名称&＃xff0c;-i为忽略大小写&＃xff0c;后面跟的是要访问的域名&＃xff0c;如果访问www.abc.com这个域名&＃xff0c;就触发web规则&＃xff0c;。acl img hdr(host) -i img.abc.com #如果访问img.abc.com这个域名&＃xff0c;就触发img规则。use_backend webserver if web #如果上面定义的web规则被触发&＃xff0c;即访问www.abc.com&＃xff0c;就将请求分发到webserver这个作用域。use_backend imgserver if img #如果上面定义的img规则被触发&＃xff0c;即访问img.abc.com&＃xff0c;就将请求分发到imgserver这个作用域。default_backend dynamic #不满足则响应backend的默认页面########backend后端配置##############
backend webserver #webserver作用域mode httpbalance roundrobin #balance roundrobin 负载轮询&＃xff0c;balance source 保存session值&＃xff0c;支持static-rr&＃xff0c;leastconn&＃xff0c;first&＃xff0c;uri等参数option httpchk /index.html HTTP/1.0 #健康检查, 检测文件&＃xff0c;如果分发到后台index.html访问不到就不再分发给它server web1 10.16.0.9:8085 COOKIE 1 weight 5 check inter 2000 rise 2 fall 3server web2 10.16.0.10:8085 COOKIE 2 weight 3 check inter 2000 rise 2 fall 3#COOKIE 1表示serverid为1&＃xff0c;check inter 1500 是检测心跳频率 #rise 2是2次正确认为服务器可用&＃xff0c;fall 3是3次失败认为服务器不可用&＃xff0c;weight代表权重backend imgservermode httpoption httpchk /index.phpbalance roundrobin server img01 192.168.137.101:80 check inter 2000 fall 3server img02 192.168.137.102:80 check inter 2000 fall 3backend dynamic balance roundrobin server test1 192.168.1.23:80 check maxconn 2000 server test2 192.168.1.24:80 check maxconn 2000listen tcptest bind 0.0.0.0:5222 mode tcp option tcplog #采用tcp日志格式 balance source #log 127.0.0.1 local0 debug server s1 192.168.100.204:7222 weight 1 server s2 192.168.100.208:7222 weight 1
![[翻译]微服务设计模式5. 服务发现服务端服务发现](https://img7.php1.cn/3cdc5/ca23/525/3af55d7cf19345b9.jpeg)
京公网安备 11010802041100号