http://www.cnblogs.com/jefflee168/p/7441742.html
#表示禁用stonith，默認情況下，若是沒有stonith設備，集群是無法啟動的。
pcs property set stonith-enabled=false
在互聯(lián)網(wǎng)高速發(fā)展的今天，尤其在電子商務的發(fā)展，要求服務器能夠提供不間斷服務。在電子商務中，如果服務器宕機，造成的損失是不可估量的。要保證服務器不間斷服務，就需要對服務器實現(xiàn)冗余。在眾多的實現(xiàn)服務器冗余的解決方案中，Pacemaker為我們提供了廉價的、可伸縮的高可用解決方案。
雙機熱備測試環(huán)境如下：
1
2
3
4
5
主節(jié)點：10.0.0.20
副節(jié)點：10.0.0.21
虛擬IP：10.0.0.100
一、關閉selinux和防火墻-兩臺機均執(zhí)行
1、 關閉selinux
1
2
$ sudo sed -i “s/SELINUX=enforcing/SELINUX=disabled/g” /etc/selinux/config
$ sudo reboot
2、 閉防火墻
1
2
$ sudo systemctl stop firewalld
$ sudo systemctl disable firewalld
二、兩臺機安裝Pacamaker
1、 利用yum安裝Pacemaker
1
$ sudo yum install -y fence-agents-all corosync pacemaker pcs
2、 修改兩臺機的hostname
1
2
3
4
5
#主節(jié)點改為node1
$ sudo hostnamectl set-hostname node1
#副節(jié)點
$ sudo hostnamectl -set-hostname node2
3、 修改兩臺機的hosts
1
2
3
4
$ sudo vim /etc/hosts
10.0.0.20 node1
10.0.0.21 node2
三、node1與node2實現(xiàn)無密鑰訪問
1
2
3
4
5
6
7
#在兩臺機均運行以下命令
$ sudo -i
# ssh-keygen
# ssh-copy-id -p 22 root@10.0.0.20
# ssh-copy-id -p 22 root@10.0.0.21
四、配置兩臺機的集群用戶hacluster，此帳戶在安裝Pacemaker時已經(jīng)自動創(chuàng)建。
1
2
3
#設置hacluster用戶的密碼
$ sudo passwd hacluster
五、配置集群節(jié)點之間的認證
1、 啟動并設置開機啟動pcsd服務，兩臺機上均執(zhí)行以下命令
1
2
3
$ sudo systemctl start pcsd
$ sudo systemctl enable pcsd
2、 配置節(jié)點間的認證，以下命令只在node1節(jié)點上執(zhí)行
1
2
3
#以下操作需要輸入用戶名hacluster和密碼
$ sudo pcs cluster auth node1 node2
到此為止，節(jié)點認證配置完成！
六、Pacemaker可以為多種服務提供支持，例如Apache、MySQL、Xen等，可使用的類型有IP地址、文件系統(tǒng)、服務、fence設備等。以下以Apache為例。
1、 兩臺機均安裝httpd
1
$ sudo yum install -y httpd
2、 設置httpd.conf-兩臺主機均配置
1
2
3
4
5
6
7
8
9
10
$ sudo vim /etc/httpd/conf/httpd.conf
Listen 0.0.0.0:80
ServerName www.node1.com //另外一臺為www.node2.coom
#設置服務器狀態(tài)頁面以便集群檢測
<Location /server-status>
SetHandler server-status
Require all granted
</Location>
3、Pacemaker可以控制httpd服務的啟動和關閉，所以node1和node2配置完httpd后需關閉httpd服務。
1
$ sudo systemctl stop httpd
七、 新建并啟動集群，以下操作均在node1上執(zhí)行
1、 新建一個名為mycluster的集群
1
$ sudo pcs cluster setup --name mycluster node1 node2
2、 啟動集群
1
$ sudo pcs cluster start --all
3、 設置自啟動集群
1
2
3
4
$ sudo pcs cluster enable –all
# 查看集群狀態(tài)
$ sudo pcs status
通過以上在node1的設置后，所有的設置都會同步在node2上。
八、為集群添加資源
1
2
3
4
5
6
7
8
9
#添加一個名為VIP的IP地址資源
#使用heartbeat作為心跳檢測
#集群每隔30s檢查該資源一次
$ sudo pcs resource create VIP ocf:heartbeat:IPaddr2 ip=10.0.0.100 cidr_netmask=24 op monitor interval=30s
$ sudo pcs resource create Web ocf:heartbeat:apache configfile=/etc/httpd/conf/httpd.conf statusurl="http://127.0.0.1/server-status" op monitor interval=30s
$ sudo pcs status
九、調整資源，讓VIP和Web兩個資源“捆綁”在一起。
1
2
3
4
5
6
7
8
9
# 方式一：將VIP和Web添加到myweb組中
$ sudo pcs resource group add myweb VIP
$ sudo pcs resource group add myweb Web
# 方式二：使用托管約束
$ sudo pcs constraint colocation add Web VIP INFINITY
# 設置先啟動VIP，再啟動Web
$ sudo pcs constraint order start VIP then start Web
十、優(yōu)先級：如果node1與node2的硬件配置不同，那么應該調整節(jié)點的優(yōu)先級，讓資源運行于硬件配置更好的服務器上，待其失效后再轉移至較低配置的服務器上。這就需要配置優(yōu)先級（Pacemaker中稱為Location）。
1、調整Location
1
2
3
# 數(shù)值越大表示優(yōu)先級越高
$ sudo pcs constraint location Web prefers node1=10
$ sudo pcs constraint location Web prefers node2=5
2、查看設置結果
1
$ sudo crm_simulate -sL
３、驗證VIP是否啟用-需顯示IP10.0.0.100
1
$ ip addr show
４、驗證httpd是否啟動
1
$ ps -aux|grep httpd
5、報錯：WARNING: no stonith devices and stonith-enabled is not false，請執(zhí)行以下命令：
1
$ sudo pcs property set stonith-enabled=false
十一、 啟動后正常情況下VIP設置在主節(jié)點10.0.0.20上。如主節(jié)點故障，則節(jié)點node2自動接管服務，方法是直接重啟節(jié)點node1，然后觀察備用節(jié)點是否接管了主機的資源，測試過程如下：
1、 在節(jié)點node1上執(zhí)行重啟操作
1
2
#執(zhí)行重啟
$ sudo reboot
2、node1重啟前截圖
3、node1重啟后狀態(tài)如下圖
4、當節(jié)點node1故障時，地點node2收不到心跳請求，超過設置的時間節(jié)點后node2啟用資源接管程序，上述命令輸出中說明VIP和Web已經(jīng)被節(jié)點node2成功接管。如果節(jié)點node1恢復且設置了優(yōu)先級，VIP和Web又會重新被節(jié)點node1接管。下圖為node1重啟后的截圖：
需要注意事項：
http://blog.csdn.net/nimasike/article/details/51896100
需要把Tomcat做成systemctl 服務, 服務名以tomcat@tomcat.service 命名
sudo pcs cluster enable --all
yum install wget
sudo pcs property set stonith-enabled=false
pcs property set no-quorum-policy=ignore
pcs resource defaults migration-threshold=1
pcs property set start-failure-is-fatal= false
pcs resource start resource-ID
pcs node online
指定網(wǎng)卡
sudo pcs resource update VIP ocf:heartbeat:IPaddr2 ip=172.52.1.23 cidr_netmask=24 op monitor interval=30s
如需指定網(wǎng)卡添加： nic=‘ens192’ ，ens192為網(wǎng)卡名
CRM支持ocf和lsb兩種資源類型：
ocf格式的啟動腳本在/usr/lib/ocf/resource.d/下面。
lsb的腳本一般在/etc/rc.d/init.d/下面。
sudo pcs resource create Web ocf:heartbeat:tomcat catalina_home=/usr/local/tomcat java_home=/usr/java/default op monitor interval=10s
CentOS7 安裝tomcat7.x為系統(tǒng)服務器 Systemctl管理Tomcat
1.首先，需要為tomcat配置pid。
bin/catalina.sh
[java] view plain copy
# Copy CATALINA_BASE from CATALINA_HOME if not already set
[ -z "$CATALINA_BASE" ] && CATALINA_BASE="$CATALINA_HOME"
# 設置pid。一定要加在CATALINA_BASE定義后面，要不然pid會生成到/下面
CATALINA_PID="$CATALINA_BASE/tomcat.pid"
tomcat.pid文件與bin目錄平級。
2.創(chuàng)建tomcat.service文件
/lib/systemd/system/tomcat.service
[java] view plain copy
[Unit]
Description=Tomcat
After=syslog.target network.target remote-fs.target nss-lookup.target
[Service]
Type=forking
Environment="JAVA_HOME=/home/jdk/jdk1.7.0_79"
PIDFile=/home/tomcat/apache-tomcat-7.0.47/tomcat.pid
ExecStart=/home/tomcat/apache-tomcat-7.0.47/bin/startup.sh
ExecReload=/bin/kill -s HUP $MAINPID
ExecStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=true
[Install]
WantedBy=multi-user.target
Environment="JAVA_HOME=/home/jdk/jdk1.7.0_79" 這里要配置環(huán)境變量，在/etc/profile中的配置在系統(tǒng)服務中不生效。
3.設置為開機啟動
[java] view plain copy
systemctl enable tomcat.service
4.其它
修改tomcat.service文件后需要執(zhí)行下面命令使其生效：
systemctl daemon-reload
查詢tomcat 進程 ps -ef | grep "tomcat"| grep -v grep
如果多個tomcat，則拷貝到不同的目錄，使用不同的端口。tomcat.service文件名不同即可。
例如：tomcat1.service tomcat2.service tomcat3.service
