Loading... <p><span style="color: inherit;font-family: inherit;font-size: 2.6em">HA专题: corosync+pacemaker实现nginx高可用</span></p> <ul class=" list-paddingleft-2"> <li> <p>前言</p> </li> <li> <p>实验介绍</p> </li> <li> <p>实验拓扑</p> </li> <li> <p>实验环境</p> </li> <li> <p>实验步骤</p> </li> <ul class=" list-paddingleft-2"> <li> <p>准备工作</p> </li> <li> <p>安装HA集群组件</p> </li> <li> <p>安装nginx和配置nfs</p> </li> <li> <p>使用crmsh配置集群资源</p> </li> <li> <p>测试</p> </li> </ul> <li> <p>总结</p> </li> </ul> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">前言</h2> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><span style="font-family: 黑体, SimHei;font-size: 16px">这几天都会学习高可用集群, 也会将其中的一些实验写出来分享给大家, 这个专题估计会写5篇左右, </span><code><span style="font-family: 黑体, SimHei;font-size: 16px">p.s: 写博客很累的</span></code></p> </blockquote> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">实验介绍</h2> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><span style="font-size: 16px;font-family: 黑体, SimHei">这次的实验比较简单, 在<strong><code>CentOS7</code></strong>使用</span><code><span style="font-size: 16px;font-family: 黑体, SimHei">corosync</span></code><span style="font-size: 16px;font-family: 黑体, SimHei">+</span><code><span style="font-size: 16px;font-family: 黑体, SimHei">pacemaker</span></code><span style="font-size: 16px;font-family: 黑体, SimHei">实现两个节点的</span><code><span style="font-size: 16px;font-family: 黑体, SimHei">nginx</span></code><span style="font-size: 16px;font-family: 黑体, SimHei">高可用</span></p> </blockquote> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">实验拓扑</h2> <p style="margin-top: 0px;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460332356851.png" /><img src="//cto.wang/usr/uploads/2016/07/20160703161226-87.png" title="1460337697371578.png" alt="blob.png" /></p> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">实验环境</h2> <table> <thead> <tr class="firstRow"> <th>主机</th> <th>IP</th> <th>功用</th> </tr> </thead> <tbody> <tr> <td style="padding: 0.5em;vertical-align: top">node1.anyisalin.com</td> <td style="padding: 0.5em;vertical-align: top">172.16.1.2</td> <td style="padding: 0.5em;vertical-align: top">web服务, HA节点</td> </tr> <tr> <td style="padding: 0.5em;vertical-align: top">node2.anyisalin.com</td> <td style="padding: 0.5em;vertical-align: top">172.16.1.3</td> <td style="padding: 0.5em;vertical-align: top">web服务, HA节点</td> </tr> <tr> <td style="padding: 0.5em;vertical-align: top">nfs.anyisalin.com</td> <td style="padding: 0.5em;vertical-align: top">172.16.1.4</td> <td style="padding: 0.5em;vertical-align: top">提供nfs服务,网站页面文件</td> </tr> </tbody> </table> <p style="margin-top: 0px;margin-bottom: 1.1em"><code>注意: 本文实验中所有主机SElinux和iptables都是关闭的</code></p> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">实验步骤</h2> <h3 style="font-family: inherit;color: inherit;font-size: 1.7em;margin: 1.2em 0px 0.6em">准备工作</h3> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><span style="font-size: 16px;font-family: 黑体, SimHei">高可用集群必须保证所有节点主机互信, 主机名解析一致, 时间同步</span></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><code>配置hosts文件同步</code><br /><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460333227622.png" /><img src="//cto.wang/usr/uploads/2016/07/20160703161227-17.png" title="1460337709421223.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><code>配置互信</code><br /><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460333390578.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460333611239.png" /><img src="//cto.wang/usr/uploads/2016/07/20160703161227-98.png" title="1460337714460119.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><code><img src="//cto.wang/usr/uploads/2016/07/20160703161227-27.png" title="1460337720538017.png" alt="blob.png" /></code></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><code><br /></code></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><code>时间同步</code><br /><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460333791574.png" /><img src="//cto.wang/usr/uploads/2016/07/20160703161228-93.png" title="1460337725445843.png" alt="blob.png" /></p> </blockquote> <h3 style="font-family: inherit;color: inherit;font-size: 1.7em;margin: 1.2em 0px 0.6em">安装HA集群组件</h3> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><span style="font-size: 16px;font-family: 黑体, SimHei">在RH系6.4之后就可以通过RedHat提供的</span><code><span style="font-size: 16px;font-family: 黑体, SimHei">pcs</span></code><span style="font-size: 16px;font-family: 黑体, SimHei">来进行对集群”全生命周期”的管理, 我们这里先通过</span><code><span style="font-size: 16px;font-family: 黑体, SimHei">pcs</span></code><span style="font-size: 16px;font-family: 黑体, SimHei">安装集群并自动生成配置文件</span></p> </blockquote> <pre>[root@node1 ~]# yum install pcs -y #node1安装pcs [root@node1 ~]# ssh node2.anyisalin.com 'yum install pcs -y ' #node2安装pcs [root@node1 ~]# echo passwd | passwd --stdin hacluster #设置hacluster用户密码 [root@node1 ~]# ssh node2.anyisalin.com "echo passwd | passwd --stdin hacluster" #为node2设置hacluster密码 [root@node1 ~]# systemctl start pcsd ; ssh node2.anyisalin.com "systemctl start pcsd" #启动pcsd [root@node1 ~]# pcs cluster auth node1.anyisalin.com node2.anyisalin.com -u hacluster #进行认证 Password: node1.anyisalin.com: Authorized node2.anyisalin.com: Authorized [root@node1 ~]# pcs cluster setup --name mycluster node1.anyisalin.com node2.anyisalin.com #安装集群 [root@node1 ~]# pcs cluster start --all #启动集群</pre> <h3 style="font-family: inherit;color: inherit;font-size: 1.7em;margin: 1.2em 0px 0.6em">安装nginx和配置nfs</h3> <pre>安装nginx [root@node1 ~]# yum install nginx -y 注意: 需epel源 [root@node1 ~]# ssh node2.anyisalin.com "yum install nginx -y " [root@node1 ~]# systemctl enable nginx #由于systemd的特性, 需将nginx设置开机自动启动 [root@node1 ~]# ssh node2.anyisalin.com "systemctl enable nginx" 配置nfs [root@nfs ~]# mkdir /www/htdocs -pv [root@nfs ~]# echo "<h1>This is NFS on 172.16.1.4</h1>" > /www/htdocs/index.html #创建网页文件 [root@nfs ~]# vim /etc/exports /www/htdocs 172.16.1.0/24(ro) [root@nfs ~]# systemctl start rpcbind.service [root@nfs ~]# systemctl start nfs-server.service #启动nfs-server 测试nfs [root@node1 ~]# mount -t nfs 172.16.1.4:/www/htdocs /usr/share/nginx/html/ #挂载成功 [root@node1 ~]# df Filesystem 1K-blocks Used Available Use% Mounted on 172.16.1.4:/www/htdocs 52403200 1134336 51268864 3% /usr/share/nginx/html [root@node1 ~]# umount /usr/share/nginx/html/</pre> <h3 style="font-family: inherit;color: inherit;font-size: 1.7em;margin: 1.2em 0px 0.6em">使用crmsh配置集群资源</h3> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><code><span style="font-family: 黑体, SimHei;font-size: 16px">pcs</span></code><span style="font-family: 黑体, SimHei;font-size: 16px">用来安装集群还可以, 但是配置集群资源, 我用了一次再也不想用了, 实在是不好用, 个人比较喜欢</span><code><span style="font-family: 黑体, SimHei;font-size: 16px">crmsh</span></code><span style="font-family: 黑体, SimHei;font-size: 16px">来配置集群, </span><code><span style="font-family: 黑体, SimHei;font-size: 16px">crmsh</span></code><span style="font-family: 黑体, SimHei;font-size: 16px">大家可以自行去下载, 安装时可能需要</span><code><span style="font-family: 黑体, SimHei;font-size: 16px">epel</span></code><span style="font-family: 黑体, SimHei;font-size: 16px">源 中的一些软件</span></p> </blockquote> <pre><code><span style="color: #800"></span>[root@node1 ~]# yum install crmsh-2.1.4-1.1.x86_64.rpm #安装crmsh 我们的rpm包是自行下载的<br /><br /><br />配置资源<br />[root@node1 ~]# crm configure<br />crm(live)configure# primitive webip ocf:heartbeat:IPaddr params ip=172.16.1.8<br />crm(live)configure# primitive nginx systemd:nginx<br /><br />crm(live)configure# primitive webstore ocf:heartbeat:Filesystem params device="172.16.1.4:/www/htdocs" directory="/usr/share/nginx/html" fstype="nfs" op start timeout=60s op stop timeout=60s op monitor interval=20s timeout=40s<br /><br />定义资源组<br />crm(live)configure# group webservice webip webstore nginx<br />crm(live)configure# verify<br />crm(live)configure# property stonith-enabled=false<br />crm(live)configure# commit<br /></code></pre> <h3 style="font-family: inherit;color: inherit;font-size: 1.7em;margin: 1.2em 0px 0.6em">测试</h3> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460336742909.png" /><img src="//cto.wang/usr/uploads/2016/07/20160703161228-78.png" title="1460337732361894.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161228-19.png" title="1460337736402100.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161228-35.png" title="1460337740637558.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161229-82.png" title="1460337743466384.png" alt="blob.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460336786622.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><img src="//cto.wang/usr/uploads/2016/07/20160703161226-23.gif" alt="Alt text" longdesc="./1460337346669.png" /></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"></p> </blockquote> <h2 style="font-family: inherit;color: inherit;font-size: 2.15em;margin: 1.2em 0px 0.6em">总结</h2> <blockquote><p style="margin-top: 0px;font-size: 1em;margin-bottom: 1.1em"><span style="font-size: 16px;font-family: 黑体, SimHei">本文简单演示HA集群的简单实现, 非常的简单. HA最重要的是它的原理, 我以前写过一篇HA原理的博客, 大家可以看看</span></p> <p style="margin-top: 0px;font-size: 1em;margin-bottom: 0px"><span style="font-size: 16px;font-family: 黑体, SimHei">作者水平很低, 如果有错误及时指出, 如果你觉得本文写的好请点一波赞~(≧▽≦)/~<br />作者: AnyISaIln QQ: 1449472454<br />感谢: MageEdu</span></p> </blockquote> 最后修改:2021 年 12 月 10 日 10 : 53 AM © 允许规范转载 赞赏 如果觉得我的文章对你有用,请随意赞赏 赞赏作者 支付宝微信