虛擬IO服務器實現(xiàn)MPIO案例分析

網絡懺悔

1 MPIO介紹\r\n2002年10月，AIX 5.2 引入了MPIO (Multi-Path I/O)多路徑管理的功能。MPIO驅動程序缺省內嵌于AIX系統(tǒng)。對支持MPIO的存儲設備，MPIO自動發(fā)現(xiàn)、配置和管理多個存儲路徑，實現(xiàn)IO的高可靠性和負載均衡。MPIO方案的實現(xiàn)有三個部分組成，分別為存儲系統(tǒng)部分、存儲軟件部分和操作系統(tǒng)部分。一般而言，存儲設備廠商都為AIX平臺提供復雜的專用的多路徑管理方案，管理IO請求，并相應的優(yōu)化存儲系統(tǒng)。這些復雜的多路徑方案，只是用于特定的存儲設備，而不能適用于其它的存儲系統(tǒng)，例如，IBM的SDD，EMC的Powerpath，日立的Hitachi Dynamic LinkManager。MPIO在系統(tǒng)層面對存儲提供支持，從而解決這一問題。\r\n2 配置基于VIO服務器客戶端AIX的MPIO\r\n此次方案實施采用的服務器和存儲設備如下圖所示：\r\n\r\n2.1．配置VIO服務器端\r\n方案開始實施之前，假定共享的DS8300的LUN已經分配給了要使用的兩個VIO服務器。\r\n2.2 創(chuàng)建VIO服務器端和客戶端SCSI適配器\r\n基于HMC，在兩個VIO服務器端創(chuàng)建虛擬SCSI適配器。建立客戶端分區(qū)，創(chuàng)建虛擬客戶端SCSI適配器，并分別映射到不同VIO服務器的SCSI適配卡。具體實施細節(jié)請參考《Advanced POWER Virtualization on IBM System p5》\r\n假定，方案實施中VIO服務器的命名分別為vio_a和vio_b，共享DS8300的LUN。DS8300的LUN已經映射到服務器vio_a和vio_b。\r\n邏輯拓撲圖如下所示：\r\n\r\n首先在服務器vio_a端確定要使用的PV，如下：\r\n$ lsdev -type disk\r\nname status description\r\n..\r\nhdisk3 Available MPIO Other FC SCSI Disk Drive\r\nhdisk4 Available MPIO Other FC SCSI Disk Drive\r\nhdisk5 Available MPIO Other FC SCSI Disk Drive\r\n…\r\n$lspv\r\n..\r\nhdisk3 00c3e35c99c0a332 None\r\nhdisk4 00c3e35c99c0a51c None\r\nhdisk5 00c3e35ca560f919 None\r\n..\r\n在以上列出的PV中，將hdisk5\r\n\r\n映射到虛擬AIX客戶端分區(qū)，生成MPIO物理盤。通過以下命令確定PV hdisk5的屬性，確�？蛻舳四苷�確識別PV，正確配置MPIO。\r\n$lsdev -dev \r\n\r\nhdisk5 -attr\r\n..\r\nalgorithm fail_over Algorithm True\r\n..\r\nlun_id 0x5463000000000000 Logical Unit Number ID False\r\n..\r\n..\r\npvid \r\n\r\n00c3e35ca560f9190000000000000000 Physical volume identifier False\r\n..\r\nreserve_policy single_path Reserve Policy True\r\n注意，\r\n\r\n物理卷hdisk5的屬性 lun_id, pvid和reserve_policy。\r\n\r\n

在VIO服務器vio_b端確定對應hdisk5的LUN，可以根據pvid查找。與vio_a對應DS8300的同一個LUN在vio_b系統(tǒng)的邏輯標示可能與vio_a標示不同，但pvid是一致的。過程如下：\r\n$lspv\r\nhdisk7 00c3e35ca560f919 None\r\n..\r\n物理卷hdisk7的pvid與vio_a的hdisk5一致，為同一個LUN。\r\n查看hdisk7的類型：\r\n$ lsdev -type disk\r\nname status description\r\n..\r\nhdisk7 Available MPIO Other FC SCSI Disk Drive\r\n..\r\n確定hdisk7的屬性：\r\n$lsdev -dev hdisk7 -attr\r\n..\r\nalgorithm fail_over Algorithm True\r\n..\r\nlun_id 0x5463000000000000 Logical Unit Number ID False\r\n..\r\npvid 00c3e35ca560f9190000000000000000 Physical volume identifier False\r\n..\r\nreserve_policy single_path \r\nReserve Policy True\r\n可以注意到hdisk7的屬性與hdisk5的屬性一致。\r\n\r\n2.3 修改物理卷的屬性 reservation policy\r\n為能在虛擬AIX客戶端分區(qū)正確的將hdisk5和hdisk7識別為MPIO的卷，需要修改PV的reserve policy屬性為no_reserve。使用命令chdev修改，使用如下：\r\n修改vio_a的hdisk5的reserve policy屬性：\r\n$ chdev -dev hdisk5 -attr reserve_policy=no_reserve\r\nhdisk4 changed\r\n同樣在vio_b VIO服務器端修改hdisk7的屬性如下：\r\n$ chdev -dev hdisk7 -attr reserve_policy=no_reserve\r\nhdisk6 changed\r\n1） 在VIO服務器端創(chuàng)建虛擬目標設備\r\n在上一步驟中，已經確定要使用的PV。再次在VIO服務器vio_a和vio_b端確定使用的虛擬SCSI適配器，使用命令mkvdev建立PV到虛擬SCSI適配器的映射關系。命令格式如下：\r\nmkvdev -vdev hdisk# -vadapter vhost# -dev vhdisk#\r\n分別在兩個VIO服務器端運行以上命令后，將在不同VIO服務器的同一個LUN映射到同一個虛擬客戶端。\r\n注意：\r\n如果PV的reserve_policy的屬性沒有設置為no_reserve，在第二個VIO服務器運行以上命令可能會失敗。\r\n2） 確認VIO服務器和虛擬客戶端間的映射關系\r\n借助于HMC，驗證客戶端的虛擬SCSI適配卡槽位，與服務器端虛擬SCSI適配\r\n卡的槽位關系，再一次確認虛擬客戶端與VIO服務器間的映射。在此例中： \r\n 客戶端分區(qū)的槽位4對應VIO服務器vio_a的槽位5 客戶端分區(qū)的槽位5對應VIO服務器vio_b的槽位5 如下圖所示：\r\n\r\n\r\n

3． 配置安裝虛擬AIX客戶端\r\n\r\n現(xiàn)在，可以安裝AIX客戶端，詳細的安裝方式請參考以下信息：\r\nhttp://www.redbooks.ibm.com/redpieces/abstracts/sg247940.html\r\n\r\n基本的安裝方式可以分為以下幾個：\r\n

• NIM安裝
• 通過克隆方式 (Alternate Disk Installation)
• 使用安裝介質CD

正確安裝AIX操作系統(tǒng)以后，察看MPIO的狀態(tài)：\r\n# lsdev -Cc disk\r\nhdisk0 Available Virtual SCSI Disk Drive\r\n# lspv\r\nhdisk0 00c3e35ca560f919 rootvg active\r\n# lspath\r\nEnabled hdisk0 vscsi0\r\nEnabled hdisk0 vscsi1\r\n\r\n可以發(fā)現(xiàn)MPIO已經啟用，其特點可歸結為：\r\n1） 雙通道\r\n為AIX虛擬客戶端提供冗余支持。一個VIO服務器故障后，由此服務器提供的鏈路失敗，但并不影響系統(tǒng)的使用。\r\n\r\n# lspath\r\nFailed hdisk0 vscsi0\r\nEnabled hdisk0 vscsi1\r\n2） 故障鏈路的監(jiān)測\r\n鏈路顯示“failed”模式，即使VIO服務器故障修復后，虛擬AIX客戶端也不能自動修復鏈路。修正客戶端鏈路，可以采用以下方式：\r\n

• 使用chpath命令激活失敗的聯(lián)絡
• 設置物理卷的屬性為自動察看狀態(tài)，屬性為hcheck_interval和hcheck_mode，值分別為：\r\n\r\nhcheck_interval : 60\r\nhcheck_mode : nonactive\r\n設置以上屬性后，系統(tǒng)可以自動監(jiān)測鏈路狀態(tài)\r\n使用如下命令設置參數(shù)：\r\n\r\n$ chdev -l hdisk# -a hcheck_interval=60 -a hcheck_mode=nonactive -P\r\n\r\n此命令需要重新引導AIX系統(tǒng)，才能生效。

3） 使用EMC作為共享存儲注意事項\r\nEMC存儲設備連接到VIO服務器，作共享存儲，要滿足以下條件：\r\n

• Powerpath版本在4.4以上
• 在兩個VIO服務器創(chuàng)建使用hdiskpower設備
• 服務器端虛擬SCSI適配卡和虛擬目標設備 (Virtual Target Device) 名稱不能重復。否則，mkvdev不 能創(chuàng)建物理卷與虛擬適配卡間的映射關系。\r\n\r\n$ mkvdev -vdev hdiskpower0 -vadapter vhost0 -dev hdiskpower0\r\n\r\nMethod error (/usr/lib/methods/define -g -d):\r\n0514-013 Logical name is required.
• reserve屬性不同于ESS/DS6000/DS8000/FAStT系列，reserve_lock。使用以下命令查看 此屬性：\r\n\r\n$ lsdev -dev hdiskpower# -attr reserve_lock\r\n\r\n更改reserve_lock屬性值，使用命令：\r\n\r\n$ chdev -dev hdiskpower# -attr reserve_lock=no\r\n\r\n另外，為能及時快速的監(jiān)測到Fiber Channel的鏈路狀態(tài)，在VIO服務器端需要修改HBA適配卡的屬性fc_err_recov和dyntrk值如下：\r\n\r\n$ chdev -dev fscsi# -attr fc_err_recov=fast_fail dyntrk=yes -perm

ibm-sky

非常的好呀！不過弄這個的機會不是太多----

greatsucceed_cu

好..................

hnxxrmyy

好..................

admking

好東西 先收藏了····

lzq968

非常好  正在弄這方面