首页 文章 精选 留言 我的

Haproxy的负载均衡、动静分离、状态监控、近期网络架构

2017-11-07 541

一、Haproxy的简介

    Haproxy的官网站点：http://haproxy.com/

    HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代 理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。

     HAProxy实现了一种事件驱动, 单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User-Space) 实现所有这些任务，所以没有这些问题。此模型的弊端是，在多核系统上，这些程序通常扩展性较差。这就是为什么他们必须进行优化以 使每个CPU时间片(Cycle)做更多的工作。

                                                                                       摘自[百度百科]


二、Haproxy的工作模式

wKioL1RwGirTYixDAAENO0C4xYo238.jpg

大致的意思就是：可以分为两部分，

第一部分是互联网，包括互联网上众多的路由设备、Firewall等；

第二部分是本地的网络架构，包括Firewall，proxy、Web server，Database等

Haproxy的注释Local balanceer in proxy mode -- 工作在代理模下是一个负载均衡的功能

通过Haproxy代理后端的Web server群集，如果需要与数据库交互，有Web server与Database建立连接。


三、Haproxy的安装和配置说明

CentOS 6.4系统中yum源提供的Haproxy的版本为1.5.2，在这里我们直接用yum安装

1、安装haproxy

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
# yum -y install haproxy
# rpm -ql haproxy                    #可以查看yum安装Haproxy生成了哪些文件
/etc/haproxy
/etc/haproxy/haproxy .cfg             #haproxy的配置文件
/etc/logrotate .d /haproxy
/etc/rc .d /init .d /haproxy             #haproxy的服务脚本文件
/usr/bin/halog                     
/usr/bin/iprange
/usr/sbin/haproxy
/usr/share/doc/haproxy-1 .5.2
/usr/share/doc/haproxy-1 .5.2 /acl-content-sw .cfg
/usr/share/doc/haproxy-1 .5.2 /acl .fig
/usr/share/doc/haproxy-1 .5.2 /haproxy .cfg
/usr/share/doc/haproxy-1 .5.2 /internals
/usr/share/haproxy
/usr/share/haproxy/400 .http          #400错误的状态码页面
/usr/share/haproxy/403 .http          #403错误的状态码页面
/usr/share/haproxy/408 .http          #408错误的状态码页面
/usr/share/haproxy/500 .http          #500错误的状态码页面
/usr/share/haproxy/502 .http          #502错误的状态码页面
/usr/share/haproxy/503 .http          #503错误的状态码页面
/usr/share/haproxy/504 .http          #504错误的状态码页面
/usr/share/man/man1/halog .1.gz       #可以直接使用man halog查看命令的使用语法
/usr/share/man/man1/haproxy .1.gz     #可以直接使用man haproxy查看命令的使用语法
/var/lib/haproxy
.....

2、haproxy的配置文件说明

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
# cd /etc/haproxy/
# cp haproxy.cfg haproxy.cfg.bak
# vim haproxy.cfg
**********************************************************************
#---------------------------------------------------------------------
# Example configuration for a possible web application.  See the
# full configuration options online.
#
#   http://haproxy.1wt.eu/download/1.4/doc/configuration.txt
#
#---------------------------------------------------------------------
 
#---------------------------------------------------------------------
# Global settings    
#---------------------------------------------------------------------
global     #全局配置文件
     # to have these messages end up in /var/log/haproxy.log you will
     # need to:     #配置日志
     #
     # 1) configure syslog to accept network log events.  This is done
     #    by adding the '-r' option to the SYSLOGD_OPTIONS in
     #    /etc/sysconfig/syslog    #修改syslog配置文件
     #
     # 2) configure local2 events to go to the /var/log/haproxy.log
     #   file. A line like the following can be added to
     #   /etc/sysconfig/syslog    #定义日志设备
     #
     #    local2.*                       /var/log/haproxy.log
     #
     log         127.0.0.1 local2         #日志配置，所有的日志都记录本地，通过local2输出
 
     chroot       /var/lib/haproxy         #改变haproxy的工作目录
     pidfile      /var/run/haproxy .pid     #指定pid文件的路径
     maxconn     4000                     #最大连接数的设定
     user        haproxy                  #指定运行服务的用户
     group       haproxy                  #指定运行服务的用户组
     daemon
 
     # turn on stats unix socket
     stats socket  /var/lib/haproxy/stats
 
#---------------------------------------------------------------------
# common defaults that all the 'listen' and 'backend' sections will
# use if not designated in their block
#---------------------------------------------------------------------
defaults
     
     mode                    http                   #默认使用协议,可以为{http|tcp|health} http:是七层协议 tcp:是四层 health：只返回OK
     log                     global                 #全局日志记录
     option                  httplog                #详细记录http日志
     option                  dontlognull            #不记录空日志
     option http-server-close                       #启用http-server-close
     option forwardfor       except 127.0.0.0 /8     #来自这些信息的都不forwardfor
     option                  redispatch             #重新分发，ServerID对应的服务器宕机后，强制定向到其他运行正常的服务器
     retries                 3                       #3次连接失败则认为服务不可用
     timeout http-request    10s                     #默认http请求超时时间
     timeout queue           1m                      #默认队列超时时间
     timeout connect         10s                     #默认连接超时时间
     timeout client          1m                      #默认客户端超时时间
     timeout server          1m                      #默认服务器超时时间
     timeout http-keep-alive 10s                     #默认持久连接超时时间
     timeout check           10s                     #默认检查时间间隔
     maxconn                 3000                    #最大连接数
 
#---------------------------------------------------------------------
# main frontend which proxys to the backends
#---------------------------------------------------------------------
frontend  main *:5000
     #定义ACL规则以如".html"结尾的文件；-i：忽略大小写
     acl url_static       path_beg       -i  /static  /images  /javascript  /stylesheets
     acl url_static       path_end       -i .jpg .gif .png .css .js
 
     use_backend static           if  url_static     #调用后端服务器并检查ACL规则是否被匹配
     default_backend             app               #客户端访问时默认调用后端服务器地址池
 
#---------------------------------------------------------------------
# static backend for serving up images, stylesheets and such
#---------------------------------------------------------------------
backend static                     #定义后端服务器
     balance     roundrobin         #定义算法;基于权重进行轮询
     server      static 127.0.0.1:4331 check    check:启动对后端server的健康状态检测
 
#---------------------------------------------------------------------
# round robin balancing between the various backends
#---------------------------------------------------------------------
backend app
     balance     roundrobin
     server  app1 127.0.0.1:5001 check
     server  app2 127.0.0.1:5002 check
     server  app3 127.0.0.1:5003 check
     server  app4 127.0.0.1:5004 check

3、haproxy的命令详解

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
# haproxy -h
HA-Proxy version 1.5.2 2014 /07/12
Copyright 2000-2014 Willy Tarreau <w@1wt.eu>
 
Usage : haproxy [-f <cfgfile>]* [ -vdVD ] [ -n <maxconn> ] [ -N <maxpconn> ]
         [ -p <pidfile> ] [ -m <max megs> ] [ -C < dir > ]
         - v  displays version ; -vv shows known build options.
         -d enters debug mode ; -db only disables background mode.
         -dM[<byte>] poisons memory with <byte> (defaults to 0x50)
         -V enters verbose mode (disables quiet mode)
         -D goes daemon ; -C changes to < dir > before loading files.
         -q quiet mode : don't display messages
         -c check mode : only check config files and  exit
         -n sets the maximum total  # of connections (2000)
         -m limits the usable amount of memory ( in  MB)
         -N sets the default, per-proxy maximum  # of connections (2000)
         -L  set  local  peer name (default to  hostname )
         -p writes pids of all children to this  file
         -de disables epoll() usage even when available
         -dp disables poll() usage even when available
         -dS disables splice usage (broken on old kernels)
         -dV disables SSL verify on servers side
         -sf /-st  [pid ]* finishes /terminates  old pids. Must be last arguments.

4、配置Haproxy的日志

1
2
3
4
5
6
7
8
9
10
11
12
13
默认情况下，Haproxy没有启用日志文件，但是我们可以根据haproxy的配置文件做修改。
(1)修改系统日志的配置文件
# vim /etc/sysconfig/rsyslog
SYSLOGD_OPTIONS= "-c 2 -r"
(2)增加日志设备
# vim /etc/rsyslog.conf 
local2.*                                                 /var/log/haproxy .log
(3)重启一下日志服务
# /etc/init.d/rsyslog restart
关闭系统日志记录器：                                       [确定]
启动系统日志记录器：                                       [确定]
(4)查看日志记录信息
# tail -f /var/log/haproxy.log


四、Haproxy负载均衡web

1、一个配置示例：

Haproxy-Server：192.168.0.105

Apache1-Client：192.168.0.102

Apache2-Client：192.168.0.106

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
**********************************************************************
#---------------------------------------------------------------------
# Global settings
#---------------------------------------------------------------------
global
     # to have these messages end up in /var/log/haproxy.log you will
     # need to:
     #
     # 1) configure syslog to accept network log events.  This is done
     #    by adding the '-r' option to the SYSLOGD_OPTIONS in
     #    /etc/sysconfig/syslog
     #
     # 2) configure local2 events to go to the /var/log/haproxy.log
     #   file. A line like the following can be added to
     #   /etc/sysconfig/syslog
     #
     #    local2.*                       /var/log/haproxy.log
     #
     log         127.0.0.1 local2
 
     chroot       /var/lib/haproxy
     pidfile      /var/run/haproxy .pid
     maxconn     4000
     user        haproxy
     group       haproxy
     daemon
 
defaults
     mode                    http
     log                     global
     option                  httplog
     option                  dontlognull
     option http-server-close
     option forwardfor       except 127.0.0.0 /8
     option                  redispatch
     retries                 3
     timeout http-request    10s
     timeout queue           1m
     timeout connect         10s
     timeout client          1m
     timeout server          1m
     timeout http-keep-alive 10s
     timeout check           10s
     maxconn                 30000
 
listen stats
     mode http
     bind 0.0.0.0:1080
     stats  enable
     stats hide-version
     stats uri      /haproxyadmin ?stats
     stats realm   Haproxy\ Statistics
     stats auth    admin:123456
     stats admin  if  TRUE
 
 
frontend http- in
     bind *:80
     mode http
     log global
     option httpclose
     option logasap
     option dontlognull
     capture request  header Host len 20
     capture request  header Referer len 60
     default_backend servers
 
frontend healthcheck
     bind :1099
     mode http
     option httpclose
     option forwardfor
     default_backend servers
 
backend servers
     balance roundrobin
     server websrv1 192.168.0.102:80 check maxconn 2000
     server websrv2 192.168.0.106:80 check maxconn 2000
**********************************************************************

2、启动Haproxy服务

1
2
# service haproxy start
正在启动 haproxy：                                         [确定]

3、浏览器访问

单独访问Apache1：192.168.0.102

wKioL1RwMNjRicJhAADYLGQ6DcA929.jpg

单独访问Apache2：192.168.0.106

wKiom1RwMF2wp7cVAADauWnSFrk034.jpg

多次刷新访问Haproxy：192.168.0.105

多次刷新Haproxy的website，会切换到后端不同的webserver主机上。

wKioL1RwMNiQBz_SAADWTNm43hg230.jpg

wKiom1RwMF2DCah8AADjp38HsUI779.jpg


五、Haproxy的状态监控

1、Haproxy的监控页面

1
2
3
4
5
6
7
8
9
10
listen stats                             #关联前端和后端定义一个完整的代理
     mode http                            #设置代理协议
     bind 0.0.0.0:1080                    #绑定相应的端口
     stats  enable                         #开启Haproxy统计状态
     stats refresh 3s              #统计页面自动刷新时间间隔
     stats hide-version                   #隐藏代理服务器版本
     stats uri      /haproxyadmin ?stats    #访问的url
     stats realm   Haproxy\ Statistics    #统计页面认证时提示内容信息
     stats auth    admin:123456           #设置登录用户和密码     
     stats admin  if  TRUE                  #如果认证通过，则就可以打开stats

2、访问监控页面

(1)登陆监控页面

admin/123456

wKioL1RwM3eilyGVAAFLazQ1qcw644.jpg

(2)查看监控页面

wKioL1RwNAHiKSM3AAk3jcCY9WM150.jpg

(3)模拟一下故障

1
2
# service httpd stop
停止 httpd：                                               [确定]

(4)在次查看监控页面

wKiom1RwNFDy-iQ0AAJkwsA7ySE639.jpg


六、Haproxy的动静分离

wKioL1RwRGXCBmjGAAQN4elUoAE138.jpg

注释说明：

在这里说明动静分离的演示流程，后端分别三台负载均衡主机上放上同样的页面，静态页面index.html，动态页面a.php；然后访问haproxy主机的静态页面和动态页面，来判断访问的是那台主机

1、动静分离的主机分配

Haproxy:192.168.0.105 proxy

Apache1:192.168.0.102 static

Apache2:192.168.0.106 static

Nginx01:192.168.0.107 dynamic


2、浏览器分别访问各个主机

Apache1:192.168.0.102 static

wKioL1RwPmfzyADHAADlewFBd-U290.jpg

Apache1:192.168.0.102 dynamic

wKiom1RwPezDweGEAAI6yhvw3ks953.jpg

Apache1:192.168.0.106 static

wKioL1RwPmejLKdTAAD9CAERs3o326.jpg

Apache1:192.168.0.106 dynamic

wKiom1RwPezRRj0AAAFMOcYx8w0873.jpg

Nginx01:192.168.0.107 static

wKioL1RwPmiwb7H-AAHHny5ngjA254.jpg

Nginx01:192.168.0.107 dynamic

wKiom1RwPezgaVq_AAKd8OyTKFs632.jpg



3、haproxy动静分离的配置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
#---------------------------------------------------------------------
# Global settings
#---------------------------------------------------------------------
global
     # to have these messages end up in /var/log/haproxy.log you will
     # need to:
     #
     # 1) configure syslog to accept network log events.  This is done
     #    by adding the '-r' option to the SYSLOGD_OPTIONS in
     #    /etc/sysconfig/syslog
     #
     # 2) configure local2 events to go to the /var/log/haproxy.log
     #   file. A line like the following can be added to
     #   /etc/sysconfig/syslog
     #
     #    local2.*                       /var/log/haproxy.log
     #
     log         127.0.0.1 local2
 
     chroot       /var/lib/haproxy
     pidfile      /var/run/haproxy .pid
     maxconn     4000
     user        haproxy
     group       haproxy
     daemon
 
defaults
     mode                    http
     log                     global
     option                  httplog
     option                  dontlognull
     option http-server-close
     option forwardfor       except 127.0.0.0 /8
     option                  redispatch
     retries                 3
     timeout http-request    10s
     timeout queue           1m
     timeout connect         10s
     timeout client          1m
     timeout server          1m
     timeout http-keep-alive 10s
     timeout check           10s
     maxconn                 30000
 
listen stats
     mode http
     bind 0.0.0.0:1080
     stats  enable
     stats hide-version
     stats uri      /haproxyadmin ?stats
     stats realm   Haproxy\ Statistics
     stats auth    admin:123456
     stats admin  if  TRUE
 
 
frontend http- in
     bind *:80
     mode http
     log global
     option httpclose
     option logasap
     option dontlognull
     capture request  header Host len 20
     capture request  header Referer len 60
     acl url_static  path_end -i .html .jpg .gif
     acl url_dynamic path_end -i .php
     default_backend servers
     use_backend lnmmp  if  url_dynamic
 
backend servers
     balance roundrobin
     server websrv1 192.168.0.102:80 check rise 2 fall 1 weight 2 maxconn 2000
     server websrv2 192.168.0.106:80 check rise 2 fall 1 weight 2 maxconn 2000
 
backend lnmmp
     balance  source
     server websrv3 192.168.0.107:80 check rise 2 fall 1 maxconn 2000

4、动静分离访问测试

wKioL1RwP5WDSfjjAAD4W8GHZqY597.jpg

wKiom1RwPxqgc-ybAAD-q3Vo2Lg725.jpg

wKioL1RwP5WD-NZPAAJ87xn_AF0588.jpg


七、近期网络架构

wKioL1RwS_Ky77adAAYSgiqjz2Y603.jpg

期望网友能够指点架构的优缺点，后期将会发布此博文






     本文转自zys467754239 51CTO博客，原文链接：http://blog.51cto.com/467754239/1581237，如需转载请自行联系原作者







上一篇 下一篇
优秀的个人博客,低调大师

微信关注我们

原文链接：https://yq.aliyun.com/articles/471451

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

安全问题-携程可能摊上大事了——崩溃原因分析

携程数据库事件网上有各种说法。有说是数据库数据和备份数据被物理删除的。也有说是各个节点的业务代码被删除 现在重新在部署。也有说是误操作，导致业务不可用。尽管众说纷芸，做为一个技术人员，我们还是需要透过现象看本质。 网站崩溃的表象 我们先观察一下ctrip这次问题的表现。从我观察视角来看，在下午2点左右，携程PC版的首页上的酒店、机票这两个最核心的应用还是无法使用的，而且个人用户也是无法登录的，同时携程手机端的酒店、机票无法使用，以及个人订单是无法查询的。 而网上的新闻报道上午11点服务就不可用了：携程方面称，今天上午11时09分，携程的部分服务器遭到不明攻击，导致官方网站及APP暂时无法正常使用，目前正在紧急恢复。从携程内部人士处获悉，此次不明攻击是携程未拦截成功的第一次数据库攻击，目前技术部正在抢救。 数据库整体被攻击的可能性极大 从这些信息来判断，应该不是业务流程上线中出BUG，或者上线流程过程有些误操作。为什么这么讲，我们要进行粗略分析。对于用户的角度来讲，好像携程的首页是只有一个，好像携程只有首页这么一个，各个业务的入口是统一的，但是从程序以及项目管理的角度来看，单单只是从携程...
2017-11-08
508
上一篇

Linux云计算岗位面试时最常遇到的40个问题

1）使用云计算有哪些优点？ 使用云计算有下列优点： a）备份数据和存储数据 b）强大的服务器功能 c）SaaS（软件即服务） d）信息技术沙盒功能 e）提高生产力 f）具有成本效益，并节省时间 2）可否列举哪些平台用于大规模云计算？ 用于大规模云计算的平台包括： a）Apache Hadoop b）MapReduce 3）可否解释用于云计算部署的不同模式？ 不同的云计算部署模式包括： a）私有云 b）公共云 c）社区云 d）混合云 4）云计算与移动计算有何区别？ 移动计算使用与云计算同样的概念。借助互联网而不是借助单个设备，云计算因数据而变得活跃。它为用户提供了需要按需获取的数据。在移动计算中，应用程序在远程服务器上运行，为用户提供了访问所存储数据的权限。 5）用户如何得益于公用计算（utility computing）？ 公用计算让用户可以只需要为使用的资源付费。它是由决定从云端部署哪种类型的服务的企业组织管理的一种插件。 大多数企业组织青睐混合策略。 6）由于数据在云端传输，你如何确保数据安全？ 数据从一个地方传输到另一地方的过程中想确保数据安全，就要确保针对你发送的数据所使用的加...
2017-11-08
502
下一篇

相关文章

发表评论

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

时间: 2025-12-12 大小: 211.28KB 下载: 54次
腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

时间: 2026-03-01 大小: 1MB 下载: 6次
Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

时间: 2025-12-21 大小: 189MB 下载: 2次
Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

时间: 2025-12-03 大小: 9.84MB 下载: 39次
手机查看

扫码在手机上查看文章

扫描二维码，手机阅读更方便

热门标签
Rocky Docker Kubernetes Gemini3 Redis Service Mesh Nacos3 Jdk25 OpenAi SpringBoot4 SpringCloud HarmonyOS6 DeepSeek

欢迎您来访！

登录后，您将获得更多功能！
热门文章
联系我们

有任何问题或合作意向欢迎联系我们

Email: 99873273@qq.com

QQ: 99873273

用户登录
用户注册