RedHat GFS基于IP網(wǎng)絡(luò)的部署

kisee

  一、描述：部署基于IP網(wǎng)絡(luò)GNBD方案的GFS。

  二、環(huán)境：三臺采用centos 5.2 x64 的系統(tǒng)，采用PXE方式安裝，各有一塊8G系統(tǒng)硬盤，另外對gfs服務(wù)端增加兩塊8G硬盤。

  三、IP配置：

    GFS服務(wù)端：10.0.70.51
    GFS服務(wù)端/客戶端：10.0.70.41
    GFS客戶端：10.0.70.61

  四、安裝軟件：
     
    涉及軟件：

  kmod-gfs.x86_64                          0.1.23-5.el5           installed      
  kmod-gfs-xen.x86_64                      0.1.23-5.el5           installed      
  kmod-gfs2.x86_64                         1.92-1.1.el5           installed      
  kmod-gfs2-xen.x86_64                     1.92-1.1.el5           installed      
  gfs-utils.x86_64                         0.1.17-1.el5           base            
  gfs2-utils.x86_64                        0.1.44-1.el5           base
  gnbd.x86_64                              1.1.5-1.el5            installed      
  kmod-gnbd.x86_64                         0.1.4-12.el5           installed      
  kmod-gnbd-xen.x86_64                     0.1.4-12.el5           installed
  lvm2-cluster.x86_64                      2.02.32-4.el5          base

    安裝命令:
  
    yum -y install gfs* kmod-gfs* gnbd* kmod-gnbd*


  五、配置步驟
　　
  1、檢查先決條件
    在編譯時，將GFS編譯為可加載模塊，所以在使用時，首先要加載GFS模塊。加載模塊命令如下：
  
    #modprobe nolock
　　
    在加載gfs模塊之前首先要加載nolock模塊，因為gfs依賴于nolock模塊
　　
    #modprobe gfs
　　
    編譯時，GFS文件系統(tǒng)是以可插入模塊方式編譯的，所以用此命令加載gfs模塊。
  
    內(nèi)核加載了對GFS文件系統(tǒng)的支持模塊后，接下來是創(chuàng)建一個GFS文件系統(tǒng)，使用GFS工具創(chuàng)建GFS文件系統(tǒng)。

  2、創(chuàng)建GFS文件系統(tǒng)
  
  命令說明:

　　gfs_mkfs -p LockProtoName -t LockTableName -j Number BlockDevice
　　LockProtoName：鎖協(xié)議，其值有：
　　lock_dlm標(biāo)準(zhǔn)協(xié)議
　　lock_gulm 早期版本使用
　　lock_nolock建立本地gfs系統(tǒng)時使用
  
  創(chuàng)建過程：

　　[root@10_0_70_51 /sbin]# ./mkfs_gfs -j 5 /dev/sdb1 -p nolock
　　Device: /dev/sdb1
　　Blocksize: 4096
　　Filesystem Size: 177484
　　Journals: 5
　　Resource Groups: 10
　　Locking Protocol:
　　Lock Table:
　　Syncing...
　　All Done
　　[root@10_0_70_51 /sbin]#
　　
  說明：將分區(qū)/dev/sdb1格式化為gfs文件系統(tǒng)，在本分區(qū)內(nèi)保存日志記錄。
　　
  3、加載GFS文件系統(tǒng)

  格式化完成后，下來是加載GFS文件系統(tǒng)
    使用方法：mount -t gfs BlockDevice MountPoint -o option

　　# mount -t gfs /dev/sdb1 /gfs ##說明：將GFS分區(qū)加載到/gfs目錄下
　　GFS: Trying to acquire journal lock 0…
　　GFS: Trying at journal 0…
　　GFS: Done
　　以上表示成功mount
　　改寫/etc/fstab文件，可以讓機(jī)器啟動以后自動加載GFS文件系統(tǒng)加以下內(nèi)容：
　　/dev/sdb1 /gfs default 0 0
　　
  六、GNBD (Global Network Block Device)全局網(wǎng)絡(luò)塊設(shè)備配置

  GNBD由服務(wù)端和客戶端兩部分組成,GNBD服務(wù)接點從自己的塊存儲設(shè)備中輸出塊級別存儲到一個gfs接點

　　1、配置GNBD的命令

　　#gnbd_export   在gnbd服務(wù)端創(chuàng)建，輸出，管理gnbds
　　#gnbd_import   在客戶端實現(xiàn)輸入和管理gnbds

　　2、啟動gnbd服務(wù)：

　　#gnbd_serv
　　啟動成功后顯示如下信息：

　　gnbd_serv: startup succeeded

　　gnbd_export使用方法：

　　gnbd_export -d pathname -e gnbdname [-c]
　　pathname：指定要輸出的存儲設(shè)備
　　gnbdname：要被客戶端使用的設(shè)備名，在整個網(wǎng)絡(luò)上必須是唯一的但是任意的
　　-o:以只讀方式輸出設(shè)備名
　　-c:能使用緩存，linux默認(rèn)不使用
　　例：gnbd_export -d /dev/sdb2 -e tgnbd2  -c

  3、gnbd_import：使用方法：

　　在使用該命令前，一定要保證gnbd.ko內(nèi)核模塊在接點上已經(jīng)被加載了，另外，服務(wù)端已經(jīng)要輸出塊設(shè)備.
使用方法：

　　gnbd_import -i Server
　　server:要輸入gnbds的主機(jī)名或ip地址
   例：gnbd_import -i nodeA

   4、性能問題

　　在一個 gnbd服務(wù)接點上運行g(shù)fs
　　可以在gnbd服務(wù)端接點上運行g(shù)fs，但性能將受到影響
　　且必遵從下面的限制：
　　必須讓gnbd服務(wù)接點上的所有設(shè)備都mount成gfs文件系統(tǒng)，且沒有輸出任何其他gnbd設(shè)備.
　　gnbd服務(wù)接點必須一不能使用緩存的模式輸出所有的gnbds，切必須是裸設(shè)備.必須在一個邏輯設(shè)備的頂部運行而不是在raw devices.上.

   6、補(bǔ)充說明
   
   當(dāng)提示mod缺少信息時候使用命令

   #modprobe -l|grep *
   查找是否存在模塊，之后運行下面命令注冊

   #modprobe *
   沒有設(shè)置集群，上述命令如有提示加”-n”時候，在命令后加“-n”參數(shù)；
   GNBD方案經(jīng)測試性能低于ISCSI方案；


本文來自ChinaUnix博客，如果查看原文請點：http://blog.chinaunix.net/u3/109111/showart_2132330.html