首页 文章 精选 留言 我的

通过ansible部署高可用LNAMMKP架构

2017-11-26 570

主/备模式高可用keepalived+{nginx(proxy)|lvs}

两台主机：httpd+php+Discuz!+phpMyAdmin

一台主机：memcached用来缓存php的session；

一台主机：mysql-server或mariadb-server；


实验规划：

  这里我规划用备用模式高可用两台keepalived+nginx(proxy)服务器作为前端代理，两台主机httpd+php+MariaDB+Discuz作为后端真实机，memcached放在第一台director上用来缓存php的session，最后用一台ansible主机实现对所有主机的部署调用。


ansible主机：172.16.1.7

director1(nginx+keepalived+memcached)：172.16.1.10，虚拟ip：172.16.1.100

director2(nginx+keepalived)：172.16.1.5

RS1(Apache+php+MariaDB)：172.16.1.3

RS2(Apache+php+MariaDB)：172.16.1.6


拓扑图如下：

f678443a34ae6ce1cb5a54e507f93c03.png


注意：

  1.把所有节点的防火墙和SElinux关闭，避免对实验干扰。

  2.同步所有节点的时间。


当部署完所有的应用后，生成如下所以的文件和子文件。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
[root@zj07 ansible] # tree
.
├── ansible.cfg
├── files
│   └── nginx.conf
├── hosts
├── playbooks
│   ├── amp.yml
│   ├── first.retry
│   ├── first.yml
│   ├── ngx.retry
│   └── ngx.yml
├── roles
│   ├── amp
│   │   ├── default
│   │   ├── files
│   │   │   └── db.sh
│   │   ├── handlers
│   │   ├── tasks
│   │   │   └── main.yml
│   │   ├── templates
│   │   └── vars
│   ├── keepalived
│   │   ├── default
│   │   ├── files
│   │   ├── handlers
│   │   │   └── main.yml
│   │   ├── tasks
│   │   │   └── main.yml
│   │   ├── templates
│   │   │   └── keepalived.conf.j2
│   │   └── vars
│   ├── memcached
│   │   ├── default
│   │   ├── files
│   │   │   └── Discuz_X3.2_SC_UTF8.zip
│   │   ├── handlers
│   │   │   └── main.yml
│   │   ├── tasks
│   │   │   └── main.yml
│   │   ├── templates
│   │   │   ├── php.ini.j2
│   │   │   └── sessstore.php.j2
│   │   └── vars
│   ├── memcached1
│   │   ├── default
│   │   ├── files
│   │   ├── handlers
│   │   ├── tasks
│   │   │   └── main.yml
│   │   ├── templates
│   │   └── vars
│   └── nginx
│       ├── default
│       ├── files
│       │   ├── default.conf.j2
│       │   └── ip_forward.sh
│       ├── handlers
│       │   └── main.yml
│       ├── tasks
│       │   └── main.yml
│       ├── templates
│       │   ├── nginx.conf.j2
│       │   └── nginx.repo.j2
│       └── vars
├── zrs.retry
└── zrs.yml
 
36 directories, 29 files

下面开始部署

-------------------------------------------------------------------------------------------

配置ansible主机

1.yum -y install ansible

2.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
vim  /etc/ansible/hosts
[knsrvs]
172.16.1.10  STATE=MASTER     PRI=100
172.16.1.5  STATE=BACKUP     PRI=98
 
[websrvs]
172.16.1.3
172.16.1.6
 
[memcached1]
172.16.1.10
 
[memcached]
172.16.1.3
172.16.1.6

3.建立免秘钥登陆，发给所以主机

ssh-keygen -t rsa -f .ssh/id_rsa -P ''

ssh-copy-id -i .ssh/id_rsa.pub root@172.16.1.10

ssh-copy-id -i .ssh/id_rsa.pub root@172.16.1.5

ssh-copy-id -i .ssh/id_rsa.pub root@172.16.1.3

ssh-copy-id -i .ssh/id_rsa.pub root@172.16.1.6

ansible all -m ping测试连通性

6bb4ac4811ae5fe63ca0bd7492c87970.png

4.在ansible主机上安装nginx和keepalived和php-fpm，以便ansible过程中需要使用其配置文件

-------------------------------------------------------------------------------------------

keepalived配置

1.mkdir /etc/ansible/roles/keepalived/{files,tasks,templates,handlers,vars,default} -pv

2.vim /etc/ansible/roles/keepalived/tasks/main.yml

0fa610dbe484dbe2dc0a40427869ac05.png

3.vim /etc/ansible/roles/keepalived/handlers/main.yml

1
2
- name: restart keepalived server
   service: name=keepalived state=restarted

4.复制刚才安装的keepalived主配置文件到指定目录,并修改如下

vim /etc/ansible/roles/keepalived/template/keepalived.conf.j2

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
! Configuration File  for  keepalived
     
global_defs {
    notification_email {
root@localhost
    }
    notification_email_from keepalived@localhost
    smtp_server 127.0.0.1
    smtp_connect_timeout 30
    router_id node1
    vrrp_mcast_group4 224.0.43.100
}
         
vrrp_script ngx_server {
     script  "killal -0 nginx"
     interval 1
     weight -5
}
     
vrrp_instance VI_1 {
     state {{ STATE }}
     interface eno16777736
     virtual_router_id 43
     priority {{ PRI }}
     advert_int 1
     track_script ngx_server
     authentication {
     auth_type PASS
         auth_pass zrs66zrs
     }
     virtual_ipaddress {
         172.16.1.100 /32  brd 172.16.1.100  dev eno16777736 label eno16777736:0
     }
}

-------------------------------------------------------------------------------------------

nginx的配置：

1.mkdir /etc/ansible/roles/nginx/{files,tasks,templates,handlers,vars,default} -pv

2.vim /etc/ansible/roles/nginx/tasks/main.yml

4eec1a9be1a65933ee63635d2a45e53b.png

3.vim /etc/ansible/roles/nginx/templates/nginx.repo.j2

1
2
3
4
5
[nginx]
name=nginx repo
baseurl=http: //nginx .org /packages/centos/7/ $basearch/
gpgcheck=0
enabled=1

复制刚才安装的nginx主配置文件到指定目录,并修改如下

vim /etc/ansible/roles/nginx/templates/nginx.conf.j2

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
user  nginx;
worker_processes  1;
 
error_log   /var/log/nginx/error .log warn;
pid         /var/run/nginx .pid;
 
 
events {
     worker_connections  1024;
}
 
http {
     include        /etc/nginx/mime .types;
     default_type  application /octet-stream ;
 
     log_format  main   '$remote_addr - $remote_user [$time_local] "$request" '
                       '$status $body_bytes_sent "$http_referer" '
                       '"$http_user_agent" "$http_x_forwarded_for"' ;
 
     access_log   /var/log/nginx/access .log  main;
 
     upstream amp {
                   server 172.16.1.3;
             server 172.16.1.6;
     }  
 
server {
     listen 80;
     location / {
         proxy_pass http: //amp ;
         proxy_set_header X-Real-IP $remote_addr;
     }
}
 
     sendfile        on;
     #tcp_nopush     on;
 
     keepalive_timeout  65;
 
     #gzip  on;
 
     include  /etc/nginx/conf .d/*.conf;
}

4.复制刚才安装的nginx主配置文件到指定目录,并修改如下

vim /etc/ansible/roles/nginx/files/default.conf.j2

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
server {
     listen       80 default_server;
     server_name  localhost;
     
     include  /etc/nginx/default .d/*.conf;
     
     location / {
         root    /usr/share/nginx/html ;
         proxy_pass http: //amp ;
         index  index.html index.htm;
     }
     
     error_page  404               /404 .html;
     location =  /404 .html {
         root    /usr/share/nginx/html ;
     }
     
     error_page   500 502 503 504   /50x .html;
     location =  /50x .html {
         root    /usr/share/nginx/html ;
     }
}

5.创建ip_forward脚本，开启前端代理服务器的核心转发功能

vim /etc/ansible/roles/nginx/files/ip_forward.sh 

1
2
3
#!/bin/bash 
#
echo  > 1  /proc/sys/net/ipv4/ip_forward

-------------------------------------------------------------------------------------------

amp的配置：


1.mkdir /etc/ansible/roles/amp/{files,tasks,templates,handlers,vars,default} -pv


2.vim /etc/ansible/roles/amp/tasks/main.yml

884f0059f4a33875850140a91ce21ae0.png

3.创建testdb数据库，和授权用户访问

vim /etc/ansible/roles/amp/files/db.sh 

1
2
3
4
5
6
#!/bin/bash
#
mysql -u root -e " 
         create database testdb;
         grant all on testdb.* TO  'testuser' @ 'localhost'  IDENTIFIED BY  '123456' ; 
         FLUSH PRIVILEGES;"

-------------------------------------------------------------------------------------------

memcached配置

memcached缓存服务器为第一台调度器即172.16.1.10服务器，所以单独配置为memcached1

1.mkdir /etc/ansible/roles/memcached1/{files,tasks,templates,handlers,vars,default} -pv

2.vim /etc/ansible/roles/memcached1/tasks/main.yml

e529bc1acbdb06003731bdf352777a55.png

后端服务器上的配置

3.mkdir /etc/ansible/roles/memcached/{files,tasks,templates,handlers,vars,default} -pv

4.vim /etc/ansible/roles/memcached/tasks/main.yml

8f49696cd9782bab1a422bdf5e5648ad.png

说明：

第二个任务：在本机安装php-fpm即可出现并修改/etc/php.ini该配置文件中的[Session]段中的缓存路径为如下，

session.save_handler = memcache

session.save_handler = "tcp://172.16.1.10:11211"


第四个任务：是建立一个缓存测试页面

vim /etc/ansible/roles/memcached/templates/sessstore.php

1
2
3
4
5
6
7
8
9
10
<?php
$mem = new Memcache;
$mem->connect( "172.16.1.10" , 11211)  or die( "Could not connect" );
$version = $mem->getVersion();
echo  "Server's version: " .$version. "<br/>\n" ;
$mem-> set ( 'hellokey' ,  'Hello World' , 0, 600) or die( "Failed to save data at the memcached server" );
echo  "Store data in the cache (data will expire in 600 seconds)<br/>\n" ;
$get_result = $mem->get( 'hellokey' );
echo  "$get_result is from memcached server." ;         
?>

第五个任务：将Discuz安装包放置在该目录下，传送到后端主机的指定目录。

第六个任务：解压该压缩包并赋予制定用户的权限

-------------------------------------------------------------------------------------------

创建主配置文件，并且调用roles：

vim /etc/ansible/zrs.yml

9444d57861d8c98730c8a3961f39bd62.png

配置完成

先测试运行一下ansible-playbook --check zrs.yml，因为有的主机已经安装了某些软件，所以测试显示的是changed或者ok或者skipping

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
[root@zj07 ansible] # ansible-playbook --check zrs.yml
 
PLAY [knsrvs] **************************************************************************
 
TASK [Gathering Facts] *****************************************************************
ok: [172.16.1.10]
ok: [172.16.1.5]
 
TASK [keepalived :  install  keepalived] *************************************************
changed: [172.16.1.5]
changed: [172.16.1.10]
 
TASK [keepalived :  install  conf  file ] **************************************************
changed: [172.16.1.10]
changed: [172.16.1.5]
 
TASK [keepalived : start keepalived] ***************************************************
changed: [172.16.1.10]
changed: [172.16.1.5]
 
TASK [nginx : copy nginx repo] *********************************************************
changed: [172.16.1.5]
ok: [172.16.1.10]
 
TASK [nginx :  install  nginx] ***********************************************************
ok: [172.16.1.10]
changed: [172.16.1.5]
 
TASK [nginx : copy conf  file ] **********************************************************
changed: [172.16.1.10]
changed: [172.16.1.5]
 
TASK [nginx : reload nginx] ************************************************************
changed: [172.16.1.10]
changed: [172.16.1.5]
 
TASK [nginx : start nginx] *************************************************************
changed: [172.16.1.5]
ok: [172.16.1.10]
 
TASK [nginx : ip_forward] **************************************************************
changed: [172.16.1.5]
changed: [172.16.1.10]
 
RUNNING HANDLER [keepalived : restart keepalived server] *******************************
changed: [172.16.1.5]
changed: [172.16.1.10]
 
PLAY [websrvs] *************************************************************************
 
TASK [Gathering Facts] *****************************************************************
ok: [172.16.1.6]
ok: [172.16.1.3]
 
TASK [amp :  install  apache-php-mysql some package on CentOS 6] *************************
skipping: [172.16.1.3] => (item=[]) 
skipping: [172.16.1.6] => (item=[]) 
 
TASK [amp :  install  apache-php-mysql some package on CentOS 7] *************************
ok: [172.16.1.6] => (item=[u 'httpd' , u 'mariadb-server' , u 'php-fpm' , u 'php-mysql' ])
changed: [172.16.1.3] => (item=[u 'httpd' , u 'mariadb-server' , u 'php-fpm' , u 'php-mysql' ])
 
TASK [amp : start apm server] **********************************************************
skipping: [172.16.1.3] => (item=httpd) 
skipping: [172.16.1.3] => (item=mysqld) 
skipping: [172.16.1.6] => (item=httpd) 
skipping: [172.16.1.6] => (item=mysqld) 
 
TASK [amp : start apm server] **********************************************************
changed: [172.16.1.6] => (item=httpd)
changed: [172.16.1.3] => (item=httpd)
changed: [172.16.1.6] => (item=mariadb)
changed: [172.16.1.3] => (item=mariadb)
 
PLAY [memcached1] **********************************************************************
 
TASK [Gathering Facts] *****************************************************************
ok: [172.16.1.10]
 
TASK [memcached1 :  install  memcached] **************************************************
ok: [172.16.1.10]
 
TASK [memcached1 : start memcached] ****************************************************
changed: [172.16.1.10]
 
PLAY [memcached] ***********************************************************************
 
TASK [Gathering Facts] *****************************************************************
ok: [172.16.1.6]
ok: [172.16.1.3]
 
TASK [memcached :  install  memcached php session] ***************************************
ok: [172.16.1.3]
ok: [172.16.1.6]
 
TASK [memcached : transfer php session conf] *******************************************
changed: [172.16.1.3]
changed: [172.16.1.6]
 
TASK [memcached : reload httpd] ********************************************************
changed: [172.16.1.6]
changed: [172.16.1.3]
 
TASK [memcached : copy sessstore  file ] *************************************************
changed: [172.16.1.6]
changed: [172.16.1.3]
 
TASK [memcached : copy discuz  file ] ****************************************************
changed: [172.16.1.6]
changed: [172.16.1.3]
 
TASK [memcached :  tar  discuz] **********************************************************
changed: [172.16.1.6]
changed: [172.16.1.3]
 
PLAY RECAP *****************************************************************************
172.16.1.10                : ok=14   changed=8    unreachable=0    failed=0   
172.16.1.3                 : ok=10   changed=7    unreachable=0    failed=0   
172.16.1.5                 : ok=11   changed=10   unreachable=0    failed=0   
172.16.1.6                 : ok=10   changed=6    unreachable=0    failed=0

测试没问题，查看缓存页面是否成功，显示没问题。

0332779093768825b0180fc91000b779.png

开始运行

ansible-playbook zrs.yml


客户端查看，成功。

eb6a49fe3c0a4967f945773e28aaa494.png679116343fb5e1f8246423294d7d714c.png



本文转自 Runs_ 51CTO博客，原文链接：http://blog.51cto.com/12667170/1981480，如需转载请自行联系原作者

上一篇 下一篇
优秀的个人博客,低调大师

微信关注我们

原文链接：https://yq.aliyun.com/articles/522364

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

nginx反代varnish缓存服务器实现后端amp动静分离架构

1.前端nginx做调度器及反代服务器，将用户的请求调度至后端的两台varnish，缓存调度算法使用一致性hash算法保证缓存命中率； 2.两台varnish反向代理用户请求至三个(组)后端主机，分别为存储静态资源(htm,html,css,js)，应用程序服务器(可以部署wordpress或Discuz!)，图片统一保存至图片服务器； 3.用户登录后，可以通过wordpress发布新的博文，并且可以上传图片； 4.如果后端主机全部宕机，varnish可以使用过期缓存响应客户端； 实验规划： director1： 172.16.1.4 nginx+keepalived 主 director2： 172.16.1.2 nginx+keepalived 备 varnish1： 172.16.1.5 varnish2： 172.16.1.6 static server： 172.16.1.10 php server： 172.16.1.3 拓扑图 一、配置两台nginx调度器主机 director1的keepalived配置 director2的keepalived配置 ...
2017-11-27
613
上一篇

【资料更新】2017苏州云栖大会，云效Work Like Alibaba智能技术专场

阿里巴巴逐年增加的双11营业额和不断创新的业务背后隐藏着怎样的秘密？ 阿里走过的这18年，用怎样的工作方法、工作形式打造出高效、创新的企业帝国？2017苏州云栖大会，云效Work Like Alibaba智能技术专场将带来前沿技术理念及实践技术成果分享，全方位解读阿里巴巴DevOps如何保证高质量、高效率工作？哪些创新技术、高效的组织形式可以赋能业务创新和企业发展？ 时间：2017年12月7日13:30-17:30 地点：苏州云栖大会_苏州日航酒店三楼中宴会厅-1 五大看点： 看点1：阿里巴巴前沿技术理念，企业软件供应链生产效能如何提升？ 看点2：金融行业持续交付先行实践者南京银行，如何实现高效研发实践？ 看点3：初创企业南京路特如何从人力资源、架构、产品线等方面做一个较高性价比的持续集成方案？ 看点4：高级产品专家带来价值>交付>
2017-11-27
562
下一篇

相关文章

发表评论

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

时间: 2025-12-03 大小: 4.36MB 下载: 23次
腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

时间: 2025-12-28 大小: 1MB 下载: 4次
Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

时间: 2025-12-21 大小: 189MB 下载: 2次
Spring

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

时间: 2025-12-17 大小: 5MB 下载: 1次
手机查看

扫码在手机上查看文章

扫描二维码，手机阅读更方便

热门标签
Nacos3 Service Mesh Redis DeepSeek Docker OpenAi Gemini3 SpringCloud Kubernetes HarmonyOS6 Jdk25 Rocky SpringBoot4

欢迎您来访！

登录后，您将获得更多功能！
热门文章
联系我们

有任何问题或合作意向欢迎联系我们

Email: 99873273@qq.com

QQ: 99873273

用户登录
用户注册