Linux高可用集群(Corosync+Pacemaker)
说在前面: 这个编辑器也太霸道了,,两个浏览器,,一个不能粘贴,一个不能上图,只能保存草稿之后切换, 造孽啊! 写博不易,且看且珍惜 [蜡烛] ntp服务器配置 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 # vim /etc/ntf.conf 加入如下配置 . # 国家授时中心 restrict 210.72.145.44 restrict 202.120.2.101 restrict 1.cn.pool.ntp.org # 允许本网络内机器同步 restrict 172.16.43.0 mask 255.255.255.0 nomodify . server 210.72.145.44 server 202.120.2.101 server 1.cn.pool.ntp.org # 配置完毕 service ntpd restart # 注意 时间服务器配置后需要等待10-15分钟 # ntpstat 可查看时间服务器状态 # 客户端使用ntpdate来同步时间 (集群中十分常用) 高可用概念: 采用架构冗余(2台以上机器) 底层节点信息传递(下图 Messaging/Infrashructrue 层) 计算机资源管理与协调(下图 Resource Allocation 层)与一身架构设计 高可用架构一览 来自https://www.suse.com/Document 高可用方案 ML messaging/infrashructrue CRM cluster resource manager RA resource agent(resorce provider) i) Corosync/OpenAIS [ML] + (Pacemaker,crm) [CRM] ii) heartbeat v1 [ML] + haresource [CRM] iii)heartbeat v2 [ML] + (crm,crmsh/hb_gui) [CRM] iv) Cman+Corosync [ML] + Pacemaker [CRM] # 以上方案在功能特点上没有区别,在于易用性 v) PCS + Conga + Pacemaker + Corosync vi) PCS + Pcsd + Pacemaker + Corosync # 以上均为全生命周期集群配置 vii) Cman + RHCS # 重量级解决方案 实验配置 172.16.43.200 master.king.com <- 主控节点,负责配置集群,但不参与 172.16.43.1 slave1.king.com <- 集群节点1 172.16.43.2 slave2.king.com <- 集群节点2 实验过程 i) 主控节点配置 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 # 安装 ansible yum -y install ansible-1.5.4-1.el6.noarch.rpm # 配置复制节点互信 ssh -keygen -t rsa # 此处需要 slave1.king.com 在主控节点上解析 ssh -copy- id -i ~/. ssh /id_rsa .pub root@slave1.king.com 或 scp ~/. ssh /id_rsa .pub root@172.16.43.1: /root/ . ssh /authorized_keys # 安装corosync,pacemaker,pcs,crmsh yum -y install corosync pacemaker yum -y install pssh-2.3.1-2.el6.x86_64.rpm yum -y install crmsh-1.2.6-4.el6.x86_64.rpm # 集群节点项配置 cd /etc/corosync cp corosync.conf.example corosync.conf # 编辑配置文件 vim corosync.conf totem { version: 2 secauth: on # 集群节点需要验证才能加入集群 threads: 0 interface { ringnumber: 0 bindnetaddr: 172.16.43.0 # 在此网段进行广播 mcastaddr: 226.94.43.1 # 多播地址 mcastport: 5405 ttl: 1 } } logging { fileline: off to_stderr: no to_logfile: yes to_syslog: yes logfile: /var/log/cluster/corosync .log debug: off timestamp: on logger_subsys { subsys: AMF debug: off } } amf { mode: disabled } service { ver: 0 name: pacemaker # 启动corosync时启动pacemaker服务 } aisexec { user: root group: root } # 生成corosync节点验证信息 corosync-keygen ii): 集群节点安装corosync + pacemaker + crmsh + pssh 及配置 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 # 配置集群节点互信,分别在集群节点1,2上执行 ssh -keygen -t rsa ssh -copy- id -i ~/. ssh /id_rsa .pub root@slave2.king.com ssh -keygen -t rsa ssh -copy- id -i ~/. ssh /id_rsa .pub root@slave1.king.com . # 配置管理节点将管理的集群节点信息 /etc/ansible/hosts [server] slave1.king.com slave2.king.com . # all 是代表hosts文件中所定义所有集群主机, all 也可换 server当前的意义是等价的 # 安装 corosync pacemaker crmsh pssh 注意crmsh , pssh 没有用yum源 # 本地文件先拷贝在安装的 ansible all -m yum -a 'name=corosync state=present' ansible all -m yum -a 'name=pacemaker state=present' ansible all -m copy -a 'src=./crmsh-1.2.6-4.el6.x86_64.rpm dest=/root' ansible all -m copy -a 'src=./pssh-2.3.1-2.el6.x86_64.rpm dest=/root' # pssh crmsh的本地安装 ansible all -m command -a 'yum -y install /root/pssh-2.3.1-2.el6.x86_64.rpm' ansible all -m command -a 'yum -y install /root/crmsh-1.2.6-4.el6.x86_64.rpm' # 将主控节点配置好的信息同步到集群节点 authkey , corosync 到 slave1,slave2 ansible all -m copy -a 'src=/etc/corosync/authkey dest=/etc/corosync' ansible all -m file -a 'path=/etc/corosync/authkey mode=400' ansible all -m copy -a 'src=/etc/corosync/corosync.conf dest=/etc/corosync' ansible all -m service -a 'name=corosync state=started' # 更多modual及参数请详见 ansible-doc modualname iii): 配置集群资源 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 crm # 在主控节点中进入crm管理器 crm > status # 查看集群状态 . 图1 # 这里是双节点集群 , 一旦失效就可能导致资源无法转移 , 所以这里设置不需要 隔离设备 crm(live)configure > property stonith-enabled= false crm(live)configure > property no-quorum-policy=ignore # 查看设置 . 图2 crm > help # 获得crm菜单帮助 # 使用configure配置主资源 注意 提示符 处的菜单路径 crm(live)configure > primitive webip ocf:heartbeat:IPaddr params ip=172.16.43.88 op monitor interval=30s timeout=20s onfail restart crm(live)configure > primitive webfile ocf:heartbeat:Filesystem params device= '172.16.43.200:/htdocs' directory= '/var/www/html' fstype= 'nfs' op monitor intetval=30s timeout=20s onfail restart crm(live)configure > primitive webhttp ocf:heartbeat:httpd crm > status # 查看集群状态, 此时资源处于均衡负载 . 图3 # 将资源加入组实现资源聚合 crm(live)configure > group webserivce webip crm(live)configure > group webserivce webfile crm(live)configure > group webserivce webhttp # 将资源加入排列顺序实现资源启动先后 order order_webip_webfile_webhttp mandatory: webip webfile webhttp . 图4 图1 图2 图3 图4 iv): 测试 .图 先发出来, 标记 .图 的地方正在编辑上传中.... 本文转自My_King1 51CTO博客，原文链接：http://blog.51cto.com/apprentice/1398628，如需转载请自行联系原作者
