lustre的mds主備切換

radio_arts

現(xiàn)在用drbd+heartbeat做mds的主備切換。
主備機(jī)器都是有兩塊網(wǎng)卡的，其中一個(gè)做心跳測(cè)試，一個(gè)做網(wǎng)絡(luò)通訊
主mds：eth0：192.168.128.10(通訊)
             eth1：192.168.0.1(心跳)
備mds1：eth0：192.168.128.11(通訊)
             eth1：192.168.0.2(心跳)

主mds啟動(dòng)后，由heartbeat自動(dòng)掛載并啟動(dòng)mgs服務(wù)。
查看日志/var/log/messages，mgs成功啟動(dòng)并掛載。
備mds1啟動(dòng)后，查看日志/var/log/messages，
Jun 16 14:10:30 mds1 heartbeat: [4252]: info: mds1 wants to go standby [foreign]
Jun 16 14:10:40 md1 heartbeat: [4252]: WARN: No reply to standby request.  Standby request cancelled.
意思是不是：mds1想作為備機(jī)，但是沒(méi)有回復(fù)mds1的請(qǐng)求，所以請(qǐng)求取消了。
不知道此時(shí)備mds1的日志內(nèi)容是不是正常的?

然后把主mds關(guān)機(jī)，由heartbeat實(shí)現(xiàn)在備機(jī)上的自動(dòng)切換，等了很久都沒(méi)有啟動(dòng)mgs服務(wù)，也沒(méi)有掛載。
查看/var/log/messages：
Jun 16 14:30:07 mgs1 kernel: [20396.365345] drbd0: peer( Primary -> Secondary )
Jun 16 14:30:37 mgs1 kernel: [20426.588971] drbd0: peer( Secondary -> Unknown ) conn( Connected -> NetworkFailure ) pdsk( UpToDate -> DUnknown )
Jun 16 14:30:37 mgs1 kernel: [20426.589268] drbd0: asender terminated
Jun 16 14:30:37 mgs1 kernel: [20426.589347] drbd0: Terminating asender thread
Jun 16 14:30:37 mgs1 kernel: [20426.601783] drbd0: Connection closed
Jun 16 14:30:37 mgs1 kernel: [20426.601940] drbd0: conn( NetworkFailure -> Unconnected )
Jun 16 14:30:37 mgs1 kernel: [20426.602058] drbd0: receiver terminated
Jun 16 14:30:37 mgs1 kernel: [20426.602092] drbd0: Restarting receiver thread
Jun 16 14:30:37 mgs1 kernel: [20426.602108] drbd0: receiver (re)started
Jun 16 14:30:37 mgs1 kernel: [20426.602113] drbd0: conn( Unconnected -> WFConnection )

日志就這么內(nèi)容了，沒(méi)有搞明白為什么heartbeat沒(méi)有啟動(dòng)資源(haresouces)？
查看cat /proc/drbd，
version: 8.3.0 (api:88/proto:86-89)
GIT-hash: 9ba8b93e24d842f0dd3fb1f9b90e8348ddb95829 build by root@web1, 2009-06-12 13:34:57
0: cs:WFConnection ro:Secondary/Unknown ds:UpToDate/DUnknown C r---
    ns:0 nr:5124 dw:5124 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0
也沒(méi)有切換為primary

請(qǐng)各位大牛幫幫忙吧。很急的！

cuplinux

Make sure your DRBD works well.

Simple I made some test on DRBD

ror2 ~]# cat /proc/drbd
version: 8.2.6 (api:88/proto:86-88)
GIT-hash: 3e69822d3bb4920a8c1bfdf7d647169eba7d2eb4 build by buildsvn@c5-i386-build, 2008-10-03 11:42:32

1: cs:Connected st:Secondary/Primary ds:UpToDate/UpToDate C r---
    ns:0 nr:5100964 dw:5100964 dr:0 al:0 bm:299 lo:0 pe:0 ua:0 ap:0 oos:0

ror1 ~]# cat /proc/drbd
version: 8.2.6 (api:88/proto:86-88)
GIT-hash: 3e69822d3bb4920a8c1bfdf7d647169eba7d2eb4 build by buildsvn@c5-i386-build, 2008-10-03 11:42:32

2: cs:Connected st:Primary/Secondary ds:UpToDate/UpToDate C r---
    ns:5100964 nr:0 dw:209392 dr:4891672 al:71 bm:299 lo:0 pe:0 ua:0 ap:0 oos:0

But i don't have much time to test for you.

http://linux-ha.org/DRBD

[ 本帖最后由 cuplinux 于 2009-6-18 09:52 編輯 ]

radio_arts

drbd工作正常，主備的drbd用cat /proc/drbd查看，和你貼出來(lái)的是一樣的。
只是主機(jī)宕機(jī)的時(shí)候，備機(jī)的drbd沒(méi)有切換為primary，這時(shí)候應(yīng)該是由heartbeat執(zhí)行drbddisk腳本使drbd變?yōu)閜rimary的。
所以我認(rèn)識(shí)是heartbeat此時(shí)沒(méi)有工作，但是ps -ef 查看進(jìn)程，heartbeat又確實(shí)處于工作狀態(tài)。
heartbeat的配置文件haresources內(nèi)容：
mds 192.168.128.200 drbddisk::r0 Filesystem::/dev/drbd0::/mnt/mds::lustre
有點(diǎn)迷茫，為什么備機(jī)的heartbeat沒(méi)有把資源搶過(guò)來(lái)。

molecar

不玩lustre好多年.呵呵.

q1208c

印象中l(wèi)ustre好象要配置一下才會(huì)成為主備的.