天天看點

DRBD+Heartbeat+NFS實驗筆記

DRBD+Heartbeat+NFS實驗筆記

環境:

Vmware6.5

Server1: eth0:192.168.1.201 sdb1 10G 心跳線: eth1: 10.10.10.131

Server2 eth0:192.168.1.202 sdb1 10G 心跳線:eth1:10.10.10.132

Heartbeat虛拟IP: 192.168.1.200

步驟:

<b>一、 </b><b>設定兩台伺服器的網卡資訊、hosts</b><b>、主機名等基本資訊及sdb</b><b>硬碟初始化。</b>

此處我們隻看看/etc/hots檔案設定

DRBD+Heartbeat+NFS實驗筆記

<b>二、</b><b>安裝并設定drbd</b>

1)安裝drbd

#tar -zxvf drbd-8.3.10.tar.gz

#cd drbd-8.3.10

#./configure --prefix=/ --with-km

#make

#make install

#chkconfig --add drbd

#chkconfig drbd on

2)DRBD的配置檔案位于/etc/drbd.conf

--------------------------------------------------------

[root@drbd1 ~]#cat /etc/drbd.conf

#

# drbd.conf

# create by [email protected] at 2010-08-12

global {

usage-count no;

}

common {

syncer { rate 200M; }

resource drbdtest {

protocol C;

handlers {

pri-on-incon-degr "echo o &amp;gt; /proc/sysrq-trigger ; halt -f";

pri-lost-after-sb "echo o &amp;gt; /proc/sysrq-trigger ; halt -f";

local-io-error "echo o &amp;gt; /proc/sysrq-trigger ; halt -f";

fence-peer "/usr/lib64/heartbeat/drbd-peer-outdater -t 5";

pri-lost "echo pri-lost. Have a look at the log files. | mail -s 'DRBD Alert' root";

split-brain "/usr/lib/drbd/notify-split-brain.sh root";

out-of-sync "/usr/lib/drbd/notify-out-of-sync.sh root";

net {

cram-hmac-alg "sha1";

shared-secret "mydrbdtest";

disk {

on-io-error detach;

fencing resource-only;

startup {

wfc-timeout 120;

degr-wfc-timeout 120;

device /dev/drbd0;

on server1{

disk /dev/sdb1;

address 192.168.1.201:7788;

meta-disk internal;

on server2 {

address 192.168.1.202:7788;

meta-disk internal; }

将上面這個drbd.conf檔案分别複制到兩台主機的/etc目錄下。

----------------------------------------------------------------

3)建立drbd塊裝置

[root@server1 drbd-8.3.10]# drbdadm create-md drbdtest

Writing meta data...

initializing activity log

NOT initialized bitmap

New drbd meta data block successfully created.

在兩台主機上執行同樣的指令

4)啟動drbd服務

#service drbd start 或 /etc/init.d/drbd start

此時drbd狀态還是secondary/secondary,我們要把192.168.1.201設定為主伺服器

[root@server1 ~]# drbdsetup /dev/drbd0 primary -o

再次檢視drbd狀态,

[root@server1 ~]# cat /proc/drbd

version: 8.3.10 (api:88/proto:86-96)

GIT-hash: 5c0b0469666682443d4785d90a2c603378f9017b build by root@server1, 2011-06-10 00:16:16

0: cs:SyncSource ro:Primary/Secondary ds:UpToDate/Inconsistent C r-----

ns:1095660 nr:0 dw:0 dr:1103744 al:0 bm:66 lo:1 pe:6 ua:64 ap:0 ep:1 wo:b oos:9387112

[=&amp;gt;..................] sync'ed: 10.6% (9164/10236)M

finish: 0:07:51 speed: 19,884 (18,248) K/sec

看到已經同步,并開始傳送資料,稍等一會再次檢視磁盤狀态都是”實時”,表示資料同步完成了。

二、 設定NFS及相關資源

啟動portmap和nfs服務,并設定開機啟動,

#service portmap start

#service nfs start

#chkconfig --level 345 portmap on

#chkconfig --level 345 nfs on

在server1上格式化drbd0裝置,并挂載在/nfs目錄

[root@server1 ~]# mkfs.ext3 /dev/drbd0

[root@server1 ~]# mkdir /nfs

現在可以把server1上的DRBD裝置挂載到/nfs目錄上進行使用。備機的DRBD裝置無法被挂載,因為它是用來接收主機資料的,由DRBD負責操作。

[root@server1 ~]# mount /dev/drbd0 /nfs

在/etc/exports 上将/nfs目錄共享出去,并reload

[root@server1 ~]exportfs –r

如果不使用heartbeat的情況下,DRBD隻能手工切換主從關系

現在修改heartbeat的配置檔案,使DRBD可以通過heartbeat自動切換

[root@server1 ~]# vi /etc/ha.d/haresources

Server1 192.168.1.201 drbddisk::drbdtest Filesystem::/dev/drbd0::/nfs::ext3 drbd portmap nfs

注釋:上面那行

Server1 定義Server1為heartbeat的主機

192.168.1.201 定義對外服務的IP位址,這個IP自動在主從機之間切換

drbddisk::drbdtest 定義使用的drbd資源

Filesystem::/dev/drbd0::/nfs::ext3 定義挂載檔案系統

drbd portmap nfs 定義其他需要切換的服務(用空格隔開)

<b>三、 </b><b>安裝并配置heartbeat</b>

1、 先建立heartbeat需要的使用者

groupadd haclient

useradd hacluster -g haclient

2、安裝heartbeat前,需要先安裝libnet包。

tar zxvf heartbeat-2.1.3.tar.gz

rpm –ivh libnet-1.1.2.1-2.2.el5.rf.i386.rpm

cd heartbeat-2.0.7

./configure

make

make install

兩台機器都要安裝,操作一樣。

3、查找下ha.cf等三個配置檔案的位置,然後将他們拷貝到/usr/local/etc/ha.d/目錄中

[root@server1 heartbeat-2.0.7]# find / -name ha.cf

/usr/local/share/doc/heartbeat-2.0.7/ha.cf

/root/heartbeat-2.0.7/doc/ha.cf

[root@server1 heartbeat-2.0.7]#cp /usr/local/share/doc/heartbeat-2.0.7/ha.cf /usr/local/etc/ha.d/ha.cf

[root@server1 heartbeat-2.0.7]# cp /usr/local/share/doc/heartbeat-2.0.7/haresources /usr/local/etc/ha.d/haresources

[root@server1 heartbeat-2.0.7]# cp /usr/local/share/doc/heartbeat-2.0.7/authkeys /usr/local/etc/ha.d/authkeys

4、修改配置檔案如下:

1)ha.cf配置内容:

------------------------------------------------------------------------------------------------------------

logfile /var/log/ha-log

keepalive 2

deadtime 30

warntime 10

initdead 120

udpport 694

bcast eth1

ucast eth1 10.10.10.132 。

auto_failback on

node server1

node server2

ping_group group1 192.168.1.1 221.5.88.88

respawn hacluster /usr/lib/heartbeat/ipfail

apiauth ipfail gid=haclient uid=hacluster

------------------------------------------------------------------------------------------------------------------

2)haresources配置内容;

server1 192.168.1.200 drbddisk::drbdtest Filesystem::/dev/drbd0::/nfs::ext3 drbd portmap nfs

3)authkeys的配置内容:

auth 1

1 crc

#2 sha1 HI!

#3 md5 Hello!

Server1和server2的配置是一樣的,除了在server2的ha.cf中将ucast的IP修改為10.10.10.131。

設定haresources檔案的權限為600。

啟動heartbeat ,卻發現錯誤,原因在于我們的配置檔案裡的ipfail檔案位置不對,我們可以尋找下。

[root@server2 ha.d]# cd /usr/lib/

[root@server2 ha.d]# find / -name ipfail

/usr/local/lib/heartbeat/ipfail

/root/heartbeat-2.0.7/contrib/ipfail

/root/heartbeat-2.0.7/contrib/ipfail/ipfail

/root/heartbeat-2.0.7/contrib/ipfail/.libs/ipfail

我們将ha.cf的配置内容修改為/usr/local/lib/heartbeat/ipfail

此時啟動heartbeat服務,發現過了一會,我們的虛拟IP 就ping不通了,檢視日志

發現時drbddisk的資源找不到,我們将drbddisk拷貝一份到/usr/local/etc/ha.d/resource.d,

[root@serrver2 ~]# cp /etc/ha.d/resource.d/drbddisk /usr/local/etc/ha.d/resource.d/drbddisk

分别在server1和server2上執行。

然後再次啟動heartbeat,此時就沒問題了。

确定heartbeat和DRBD開機自啟動

确定需要由heartbeat切換的服務,開機不自啟動(由heartbeat來啟用相關的服務)

四、測試

繼續閱讀