HAProxy在高并发下的表现,高并发解决方案

【高并发应用方案】7、HAProxy安装和安插,施工方案haproxy

HAProxy在高并发下的表现

讯奇音信网关服务器从首都搬迁到北京机房后,出现短信下发后,短信状态报告只收到到60%左右。

经过询问事情逻辑后,通过haproxy的stats页面,看见总括景况如下:

图片 1

在红圈中得以看来,最高session数量一度达到4096,而作者的haproxy.cfg文件中的maxconn是3000.自然连接数是远远不够的。其实后端短信服务器上直接报错,前台页面服务器也报错,只是我们未有就以此难点交流过。导致那几个主题素材不断了贴近三个月才联合化解。

据此决断修改为四千.双重加载配置,连接数上去了。但resp部分的reset连接还是不断高涨。为何呢?

选择ulimit -n查看,开掘open files
是暗中认可的1024,果决修改为六千0,大学一年级点也力所不及。观察一段时间,发掘纵然resp增进的进程回退,但依旧有。再调度参数:

net.ipv4.tcp_fin_timeout = 5

net.ipv4.tcp_tw_reuse = 1

net.ipv4.tcp_tw_recycle = 1

HAProxy在高并发下的表现,高并发解决方案。net.ipv4.ip_local_port_range = 10240    61000

修改完毕后,再观望一段时间,开掘那下终于平静的。resp一向维系为0.

本来那其中经过持续了2天时间才化解。

Haproxy+Keepalived搭建Weblogic高可用负载均衡集群

Keepalived+HAProxy配置高可用负载均衡

CentOS 6.3下Haproxy+Keepalived+Apache配置笔记

Haproxy + KeepAlived 实现WEB群集 on CentOS 6

Haproxy+Keepalived创设高可用负载均衡

选拔 HAProxy 配置 HTTP 负载均衡器

HAproxy 的详实介绍:请点这里
HAproxy 的下载地址:请点这里

本文恒久更新链接地址:

讯奇音讯网关服务器从巴黎迁徙到深圳机房后,出现短信下发后,短信状态报告只收取到十分之三左右。
通过询问事情逻…

讯奇音信网关服务器从首都迁徙到上海机房后,出现短信下发后,短信状态报告只接受到伍分一左右。

HAProxy介绍,haproxy

简介

HAProxy提供高可用性、负载均衡以及依据TCP和HTTP应用的代办,扶助虚构主机,它是免费、快速而且可相信的一种缓慢解决方案。

HAProxy特别适用于那么些负载特大的web站点,这一个站点经常又必要会话保持或七层管理。

HAProxy运营在如今的硬件上,完全可以帮衬多元的面世连接。何况它的周转格局使得它能够很轻易安全的结合进你当前的架构中,
同一时候能够保证你的web服务器不被某一个人暴露光到网络上。

HAProxy完结了一种事件驱动, 单一进程模型,此模型支撑十分的大的并发连接数。多进度或十六线程模型受内存限制
、系统调节器限制以及无处不在的锁限制,比少之又少能管理数千并发连接。事件驱动模型因为在有更加好的财富和岁月管理的客户空间(User-Space)
完结全部那

些职务,所以并未那一个难点。此模型的害处是,在多核系统上,那么些程序平日扩张性比较糟糕。那正是干吗他们必得举办优化以
使各种CPU时间片(Cycle)做更加多的干活。

透过摸底职业逻辑后,通过haproxy的stats页面,见到计算景况如下:

简单表达

HAProxy提供高可用性、负载均衡以及依据TCP和HTTP应用的代理,辅助虚构主机,它是无需付费、连忙而且可相信的一种减轻方案。HAProxy非常适用于那多少个负载特大的web站点,这一个站点日常又须求会话保持或七层管理。HAProxy运营在时下的硬件上,完全能够帮衬多元的现身连接。何况它的周转形式使得它能够很简短安全的三结合进你当前的架构中,同有的时候间能够珍贵你的web服务器不被爆出到互连网上.
haproxy 配置中分成五有些剧情,分别如下:
1、global:参数是进度级的,常常是和操作系统相关。这么些参数常常只设置三次,假设布置准确,就无需再次举办改换
2、defaults:配置暗许参数,那些参数能够被用到frontend,backend,Listen组件
3、frontend:接收央浼的前端设想节点,Frontend能够更上一层楼平整直接钦定具体应用后端的backend
4、backend:后端服务集群的配备,是真实服务器,二个Backend对应三个要么四个实体服务器

5、Listen Fronted和backend的组合体

安装

#下载
wget http://fossies.org/linux/misc/haproxy-1.6.9.tar.gz
#解压
tar -zxvf haproxy-1.6.9.tar.gz
cd haproxy-1.6.9
#安装
make TARGET=linux2628 ARCH=x86_64 PREFIX=/usr/local/haproxy
make install PREFIX=/usr/local/haproxy

#参数说明
TARGET=linux26 #内核版本,使用uname -r查看内核,如:2.6.18-371.el5,此时该参数就为linux26;kernel 大于2.6.28的用:TARGET=linux2628
ARCH=x86_64 #系统位数
PREFIX=/usr/local/haprpxy #/usr/local/haprpxy为haprpxy安装路径

图片 2

官方网站地址

配置

###########全局配置#########
global
  log 127.0.0.1 local0 #[日志输出配置,所有日志都记录在本机,通过local0输出]
  log 127.0.0.1 local1 notice #定义haproxy 日志级别[error warringinfo debug]
  daemon #以后台形式运行harpoxy
  nbproc 1 #设置进程数量
  maxconn 4096 #默认最大连接数,需考虑ulimit-n限制
  #user haproxy #运行haproxy的用户
  #group haproxy #运行haproxy的用户所在的组
  #pidfile /var/run/haproxy.pid #haproxy 进程PID文件
  #ulimit-n 819200 #ulimit 的数量限制
  #chroot /usr/share/haproxy #chroot运行路径
  #debug #haproxy 调试级别,建议只在开启单进程的时候调试
  #quiet

########默认配置############
defaults
  log global
  mode http #默认的模式mode { tcp|http|health },tcp是4层,http是7层,health只会返回OK
  option httplog #日志类别,采用httplog
  option dontlognull #不记录健康检查日志信息
  retries 2 #两次连接失败就认为是服务器不可用,也可以通过后面设置
  #option forwardfor #如果后端服务器需要获得客户端真实ip需要配置的参数,可以从Http Header中获得客户端ip
  option httpclose #每次请求完毕后主动关闭http通道,haproxy不支持keep-alive,只能模拟这种模式的实现
  #option redispatch #当serverId对应的服务器挂掉后,强制定向到其他健康的服务器,以后将不支持
  option abortonclose #当服务器负载很高的时候,自动结束掉当前队列处理比较久的链接
  maxconn 4096 #默认的最大连接数
  timeout connect 5000ms #连接超时
  timeout client 30000ms #客户端超时
  timeout server 30000ms #服务器超时
  #timeout check 2000 #心跳检测超时
  #timeout http-keep-alive10s #默认持久连接超时时间
  #timeout http-request 10s #默认http请求超时时间
  #timeout queue 1m #默认队列超时时间
  balance roundrobin #设置默认负载均衡方式,轮询方式
  #balance source #设置默认负载均衡方式,类似于nginx的ip_hash
  #balnace leastconn #设置默认负载均衡方式,最小连接数

########统计页面配置########
listen stats
  bind 0.0.0.0:1080 #设置Frontend和Backend的组合体,监控组的名称,按需要自定义名称
  mode http #http的7层模式
  option httplog #采用http日志格式
  #log 127.0.0.1 local0 err #错误日志记录
  maxconn 10 #默认的最大连接数
  stats refresh 30s #统计页面自动刷新时间
  stats uri /stats #统计页面url
  stats realm XingCloud\ Haproxy #统计页面密码框上提示文本
  stats auth admin:admin #设置监控页面的用户和密码:admin,可以设置多个用户名
  stats auth Frank:Frank #设置监控页面的用户和密码:Frank
  stats hide-version #隐藏统计页面上HAProxy的版本信息
  stats admin if TRUE #设置手工启动/禁用,后端服务器(haproxy-1.4.9以后版本)

########设置haproxy 错误页面#####
#errorfile 403 /home/haproxy/haproxy/errorfiles/403.http
#errorfile 500 /home/haproxy/haproxy/errorfiles/500.http
#errorfile 502 /home/haproxy/haproxy/errorfiles/502.http
#errorfile 503 /home/haproxy/haproxy/errorfiles/503.http
#errorfile 504 /home/haproxy/haproxy/errorfiles/504.http

########frontend前端配置##############
frontend main
  bind *:80 #这里建议使用bind *:80的方式,要不然做集群高可用的时候有问题,vip切换到其他机器就不能访问了。
  acl web hdr(host) -i www.abc.com  #acl后面是规则名称,-i为忽略大小写,后面跟的是要访问的域名,如果访问www.abc.com这个域名,就触发web规则,。
  acl img hdr(host) -i img.abc.com  #如果访问img.abc.com这个域名,就触发img规则。
  use_backend webserver if web   #如果上面定义的web规则被触发,即访问www.abc.com,就将请求分发到webserver这个作用域。
  use_backend imgserver if img   #如果上面定义的img规则被触发,即访问img.abc.com,就将请求分发到imgserver这个作用域。
  default_backend dynamic #不满足则响应backend的默认页面

########backend后端配置##############
backend webserver #webserver作用域
  mode http
  balance roundrobin #balance roundrobin 负载轮询,balance source 保存session值,支持static-rr,leastconn,first,uri等参数
  option httpchk /index.html HTTP/1.0 #健康检查, 检测文件,如果分发到后台index.html访问不到就不再分发给它
  server web1 10.16.0.9:8085 cookie 1 weight 5 check inter 2000 rise 2 fall 3
  server web2 10.16.0.10:8085 cookie 2 weight 3 check inter 2000 rise 2 fall 3
  #cookie 1表示serverid为1,check inter 1500 是检测心跳频率 
  #rise 2是2次正确认为服务器可用,fall 3是3次失败认为服务器不可用,weight代表权重

backend imgserver
  mode http
  option httpchk /index.php
  balance roundrobin 
  server img01 192.168.137.101:80 check inter 2000 fall 3
  server img02 192.168.137.102:80 check inter 2000 fall 3

backend dynamic 
  balance roundrobin 
  server test1 192.168.1.23:80 check maxconn 2000 
  server test2 192.168.1.24:80 check maxconn 2000


listen tcptest 
  bind 0.0.0.0:5222 
  mode tcp 
  option tcplog #采用tcp日志格式 
  balance source 
  #log 127.0.0.1 local0 debug 
  server s1 192.168.100.204:7222 weight 1 
  server s2 192.168.100.208:7222 weight 1

在红圈中得以见见,最高session数量已经到达4096,而小编的haproxy.cfg文件中的maxconn是3000.自然连接数是缺乏的。其实后端短信服务器上直接报错,前台页面服务器也报错,只是我们没有就以此难点调换过。导致这么些主题材料不断了临近一个月才联合化解。

架构图

图片 3

负载均衡算法

一、roundrobin,表示简单的轮询,每个服务器根据权重轮流使用,在服务器的处理时间平均分配的情况下这是最流畅和公平的算法。该算法是动态的,对于实例启动慢的服务器权重会在运行中调整。

二、static-rr,表示根据权重,建议关注;每个服务器根据权重轮流使用,类似roundrobin,但它是静态的,意味着运行时修改权限是无效的。另外,它对服务器的数量没有限制。

三、leastconn,表示最少连接者先处理,建议关注;leastconn建议用于长会话服务,例如LDAP、SQL、TSE等,而不适合短会话协议。如HTTP.该算法是动态的,对于实例启动慢的服务器权重会在运行中调整。

四、source,表示根据请求源IP,建议关注;对请求源IP地址进行哈希,用可用服务器的权重总数除以哈希值,根据结果进行分配。
           只要服务器正常,同一个客户端IP地址总是访问同一个服务器。如果哈希的结果随可用服务器数量而变化,那么客户端会定向到不同的服务器;
           该算法一般用于不能插入cookie的Tcp模式。它还可以用于广域网上为拒绝使用会话cookie的客户端提供最有效的粘连;
           该算法默认是静态的,所以运行时修改服务器的权重是无效的,但是算法会根据“hash-type”的变化做调整。
五、uri,表示根据请求的URI;表示根据请求的URI左端(问号之前)进行哈希,用可用服务器的权重总数除以哈希值,根据结果进行分配。
        只要服务器正常,同一个URI地址总是访问同一个服务器。
        一般用于代理缓存和反病毒代理,以最大限度的提高缓存的命中率。该算法只能用于HTTP后端;
        该算法一般用于后端是缓存服务器;
        该算法默认是静态的,所以运行时修改服务器的权重是无效的,但是算法会根据“hash-type”的变化做调整。
六、url_param,表示根据请求的URl参数'balance url_param' requires an URL parameter name
              在HTTP GET请求的查询串中查找<param>中指定的URL参数,基本上可以锁定使用特制的URL到特定的负载均衡器节点的要求;
              该算法一般用于将同一个用户的信息发送到同一个后端服务器;
              该算法默认是静态的,所以运行时修改服务器的权重是无效的,但是算法会根据“hash-type”的变化做调整。
七、hdr(name),表示根据HTTP请求头来锁定每一次HTTP请求;
              在每个HTTP请求中查找HTTP头<name>,HTTP头<name>将被看作在每个HTTP请求,并针对特定的节点;
              如果缺少头或者头没有任何值,则用roundrobin代替;
              该算法默认是静态的,所以运行时修改服务器的权重是无效的,但是算法会根据“hash-type”的变化做调整。
八、rdp-cookie(name),表示根据据cookie(name)来锁定并哈希每一次TCP请求。
                     为每个进来的TCP请求查询并哈希RDP cookie<name>;
                     该机制用于退化的持久模式,可以使同一个用户或者同一个会话ID总是发送给同一台服务器。
                     如果没有cookie,则使用roundrobin算法代替;
                     该算法默认是静态的,所以运行时修改服务器的权重是无效的,但是算法会根据“hash-type”的变化做调整。

#其实这些算法各有各的用法,我们平时应用得比较多的应该是roundrobin、source和lestconn。

haproxy负载均衡算法

为此果决修改为陆仟.再一次加载配置,连接数上去了。但resp部分的reset连接仍旧穿梭上升。为什么呢?

功能相比较

图片 4

ACL法规定义

########ACL策略定义#########################
1、#如果请求的域名满足正则表达式返回true -i是忽略大小写
acl denali_policy hdr_reg(host) -i ^(www.inbank.com|image.inbank.com)$

2、#如果请求域名满足www.inbank.com 返回 true -i是忽略大小写
acl tm_policy hdr_dom(host) -i www.inbank.com

3、#在请求url中包含sip_apiname=,则此控制策略返回true,否则为false
acl invalid_req url_sub -i sip_apiname=#定义一个名为invalid_req的策略

4、#在请求url中存在timetask作为部分地址路径,则此控制策略返回true,否则返回false
acl timetask_req url_dir -i timetask

5、#当请求的header中Content-length等于0时返回 true
acl missing_cl hdr_cnt(Content-length) eq 0

#########acl策略匹配相应###################
1、#当请求中header中Content-length等于0 阻止请求返回403
block if missing_cl

2、#block表示阻止请求,返回403错误,当前表示如果不满足策略invalid_req,或者满足策略timetask_req,则阻止请求。
block if !invalid_req || timetask_req

3、#当满足denali_policy的策略时使用denali_server的backend
use_backend denali_server if denali_policy

4、#当满足tm_policy的策略时使用tm_server的backend
use_backend tm_server if tm_policy

5、#reqisetbe关键字定义,根据定义的关键字选择backend
reqisetbe ^Host:\ img dynamic
reqisetbe ^[^\ ]*\ /(img|css)/ dynamic
reqisetbe ^[^\ ]*\ /admin/stats stats

6、#以上都不满足的时候使用默认mms_server的backend
default_backend mms

haproxy acl定义

使用ulimit -n查看,发掘open files
是暗中同意的1024,果决修改为四千0,大学一年级些也心有余而力不足。阅览一段时间,开采即便resp拉长的快慢下降,但要么有。再调解参数:

下载格局

图片 5

简单表明HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代办,协助设想主机,它是无需付费、火速而且可信赖的一种解…

相关文章