存儲系統(tǒng)AS5300/5500G2

主機OS雙活最佳實踐

AS53OO/55OOG2主機OS雙活最佳實踐

尊敬的存儲系統(tǒng)用戶：

衷心感謝您選用了存儲系統(tǒng)！

本手冊介紹了本存儲系統(tǒng)的技術(shù)特性與系統(tǒng)的安裝、設(shè)置和使用，有助于您更詳細地了解和

便捷地使用本款存儲系統(tǒng)。

請將我方產(chǎn)品的包裝物交廢品收購站回收利用，以利于污染預(yù)防，造福人類’

擁有木于?冊的版權(quán)。

未經(jīng)許可，任何單位和個人不得以任何形式復(fù)制本用戶手冊。保留隨時修改本手冊的權(quán)利。

本手冊中的內(nèi)容如有變動恕不另行通知。

如果您對本手冊有疑問或建議，請向電子信息產(chǎn)業(yè)股份有限公司垂詢。

AS53OO/55OOG2主機OS雙活最佳實踐

聲明

在您正式使用本存儲系統(tǒng)之前，請您先閱讀以卜聲明.只有您閱讀了以卜聲明并且同意以F

各條款后，方可正式開始使用本存儲系統(tǒng)；如果您對以下條款有任何疑問，請和您的供貨商

聯(lián)系或直接與我們聯(lián)系。如您未向我們就以下條款提出疑問并開始使用本系統(tǒng)，則是默認您

已經(jīng)同意了以下各條款。

1、我們提醒您特別注意：在任何時候，除r我們提示您可以修改的參數(shù)以外，您不要修改

木存儲系統(tǒng)主板BIOS中的任何其他參數(shù)。

2、在您使用的存儲系統(tǒng)出現(xiàn)任何硬件故障或您希望對硬件進行任何升級時，請您將機瑞的

詳細硬件配置反映給我們的客戶服務(wù)中心;您不要自行拆卸存儲系統(tǒng)機箱及機箱內(nèi)任何硬件

設(shè)備。

3、本存儲系統(tǒng)的內(nèi)存、CPU、CPU散熱片、風(fēng)扇、硬藍托架、硬盤等都是特殊規(guī)格的，請

您不要將它們和任何其他型號機器的用應(yīng)設(shè)備混用。

4、您在使用存儲系統(tǒng)過程中遇到的任何軟件問題，我們希望您苜先和相應(yīng)軟件的提供商聯(lián)

系，由他和我們聯(lián)系，以方便我們溝通、共同解決您遇到的問題。對于如數(shù)據(jù)庫、網(wǎng)絡(luò)管理

軟件或其他網(wǎng)絡(luò)產(chǎn)品等的安裝、運行問題，我們尤其希望您能夠這樣處理。

5、如果上架安裝本存儲系統(tǒng)，請先仔細閱讀相關(guān)產(chǎn)品手冊中的快速安裝指床。致力于產(chǎn)品

功能和性能的持續(xù)提升,這可能導(dǎo)致部分功能及操作與手冊描述有所差異，但不會影響使用，

如果您有任何使用疑難問題，請與我們的客戶服務(wù)中心聯(lián)系。

6、我們特別提醒您：在使用過程中，注意對您的數(shù)據(jù)進行必要的備份。

7、此為A級產(chǎn)品，在生活環(huán)境中，該產(chǎn)品可能會造成無線電干擾。在這種情況下，可能需

要用戶對其干擾采取切實可行的措施.

8、請仔細閱讀并遵守本手冊的安全細則。

9、本手冊中涉及的各軟、硬件產(chǎn)品的標(biāo)識、名稱版權(quán)歸產(chǎn)品的相應(yīng)公司擁有。

10、以上聲明中，“我們”指代電子信息產(chǎn)業(yè)股份有限公司：電子信息產(chǎn)業(yè)股份有限公司擁

有對以上聲明的最終解釋權(quán)。

AS53OO/55OOG2主機OS雙活最佳實踐

安全細則

1、本系統(tǒng)中的電源設(shè)備可能會產(chǎn)生高電壓和危險電能，從而導(dǎo)致人身傷害。請勿自行卸卜

主機蓋，并拆裝、更換系統(tǒng)內(nèi)部的任何組件，除非另外得到的通知，否則只有.經(jīng)過培訓(xùn)的維修

技術(shù)人員才有權(quán)拆開主機蓋及拆裝、更換內(nèi)部組件。

2、請將設(shè)備連接到適當(dāng)?shù)碾娫矗瑑x可使用額定輸入標(biāo)簽上指明的外部電源類型為設(shè)備供電，

為保護您的設(shè)備免受電樂瞬間升高或降低所導(dǎo)致的損壞，話使用相關(guān)的穩(wěn)壓設(shè)備或不間斷電

源設(shè)備。

3、如果必須使用延長電纜，詩使用配有正確接地插頭的三芯電纜，并查看延長電纜的額定

值，確保插入延長電纜的所有產(chǎn)品的額定電流總和不超過延長電纜額定電流限制的仃分之八

十。

4,請務(wù)必使用隨機配備的供電組件如電源線、電源插座（如果防機配備）等，為了設(shè)備及

使用者的安全，不要隨意更換電源電纜或插頭。

5、為防止系統(tǒng)漏電造成電擊危險，務(wù)必將系統(tǒng)和外國設(shè)備的電源電縊插入已正確接地的電

源插座。請將3芯電源線插頭插入接地良好、伸手可及的3芯交流電源插座巾，務(wù)必使用電

源線的接地插腳，不要使用轉(zhuǎn)接插頭或拔下電纜的接地插腳，在未安裝接地導(dǎo)線及不確定是

否已有適當(dāng)接地保護的情況下，請勿操作使用本設(shè)備，可與電工聯(lián)系咨詢。

6、切勿將任何物體塞入系統(tǒng)的開孔處。如果塞入物體，可能會導(dǎo)致內(nèi)部組件短路而引起火

災(zāi)或電擊。

7,請將系統(tǒng)置于遠離散熱片和有熱源的地方，切勿堵塞通風(fēng)孔。

8、切勿讓食物或液體散落在系統(tǒng)內(nèi)部或其它組件上，不要在高潮濕、高灰塵的環(huán)境中使用

產(chǎn)品。

9、用錯誤型號的電池更換會有爆炸危險，需要更換電池時，請先向制造商咨詢并使用制造

商推薦型號相同或相近的電池，切勿拆開、擠壓、剌戳電池或使其外部接點短路，不要將其

丟入火中或水中，也不要暴露在溫度超過60攝氏度的環(huán)境中，請勿嘗試打開或維修電池，

務(wù)必合理處置用完的電池，不要將用完的電池及可能包含電池的電路板及其它組件與其它廢

品放在起，疔關(guān)電池回收請與當(dāng)?shù)貜UH回收處理機構(gòu)聯(lián)系。

AS53OO/55OOG2主機OS雙活最佳實踐

版本控制

文檔版本1.0

第一次正式發(fā)布”

AS53OO/55OOG2主機OS雙活最佳實踐

目錄

聲明........................................................................ii

安全細則.....................................................................iii

版本控制.....................................................................iv

目錄........................................................................v

1存儲雙活(InMetro)......................................................................................................................1

1.1InMeiro概覽..........................................................1

1.1.1InMetro功能與應(yīng)用場毋..........................................1

1.1.2InMeiro架構(gòu)....................................................1

1.1.3約束與限制....................................................2

1.1.4優(yōu)勢..........................................................3

1.2InMetro設(shè)計需要考慮的點..............................................3

1.2.1InMetro配置...................................................4

1.2.2光纖通道距崗設(shè)宜..............................................15

1.3InMetro實施需要考慮的點.............................................16

1.3.1規(guī)劃注意事項.................................................)6

1.3.2配置注意事項..................................................19

1.3.3配置完成驗證方法.............................................22

1.4InMetro故障場景及恢復(fù)方案...........................................23

1.4.1故障場景及恢復(fù)方案...........................................23

1.4.2故障切換.....................................................25

2Hyper-v雙活最佳實踐.....................................................26

2.1組網(wǎng)架構(gòu)............................................................26

2.2優(yōu)勢................................................................28

2.3規(guī)劃................................................................28

2.4集群配置............................................................29

2.4.1Hyper-v集群部署步驟...........................................29

2.4.2環(huán)境配置前提條件及注意事項...................................30

2.4.3配置建議.....................................................31

2.5故障場景及恢史方案測試結(jié)果.........................................32

2.5.1測試計劃的故障轉(zhuǎn)移...........................................32

2.5.2測試非計劃的故障轉(zhuǎn)移.........................................32

2.5.3測試存儲雙活.................................................32

3OracleRac雙活最佳實踐...................................................33

3.1組網(wǎng)架構(gòu)............................................................33

3.2優(yōu)勢................................................................34

3.3規(guī)劃................................................................34

331OniclcRAC節(jié)點信息規(guī)劃.......................................34

AS53OO/55OOG2主機OS雙活最佳實踐

3.3.2磁盤規(guī)劃.....................................................35

3.4集群配置...........................................................35

3.4.1部署OracleRAC步驟...........................................35

^^?,1Hf.J,I(■xiy'>■■■■■■■■■>>■■■■■?■■■?(■■■■■■?■■■?■■■■?■■■■■■?■■■?■■■■■■■>■■>■■■■■■■■??■■■■■■■■■>>■■■■■?■■■3^^

3.5.1測試負載均衡LoadBalance..................................................................................40

3.5.2測試Failover...........................................................................................................42

3.5.3測試存儲雙活.................................................44

4VMwarevMSC雙活最佳實踐...............................................45

4.1組網(wǎng)結(jié)構(gòu)............................................................45

42俏油46

4.3部署要求............................................................46

4.3.1ESXI主機總線適配器要求......................................47

4.3.2設(shè)置最大的Lunnumber值......................................47

4.3.3路徑選擇策略.................................................47

4.3.4無效路徑的路徑故障轉(zhuǎn)移.......................................48

4.3.5VMware分布式資源調(diào)度........................................49

4.3.6命名約定.....................................................49

4.3.7延時時間檢查.................................................51

4.4VMwareHA..........................................................................................................................51

4.4.1HA準(zhǔn)入控制..................................................51

4.4.2HA心跳檢測..................................................52

4.4.3HA高級設(shè)置..................................................53

4.4.4增強的所有路徑下降檢測(APD)...................................................................53

4.4.5永久性設(shè)備丟失(PDL).....................................................................................53

4.4.6虛擬機組件保護(VMCP)......................................................................................54

4.4.7存儲故障檢測流程.............................................57

4.5ESXI雙活故障場景..................................................57

4.5.1單ESXI主機故障..............................................57

4.5.2單站點存儲故障...............................................58

4.5.3存儲上的某卷永久故障.........................................59

4.5.4單站點主機全面故障...........................................60

4.5.5單站點主機和存儲全面故障.....................................60

456單存儲跖徑故障................................................61

4.5.7InMetro中，仲裁站點路徑故障..................................62

5華為FusionSphere.........................................................................................................................64

5?1Jk1?Jk■FXC-?????????????????????????????????????????????????????????????????????????????????????????????????????????????????????6??4?

5.1.2ISCSI....65

AS53OO乃S00G2主機OS雙活最佳實踐

5.2組網(wǎng)架構(gòu)...............................................................69

5.3優(yōu)勢...................................................................70

5.4故障場景...............................................................70

5.4.1單存儲站點故障..................................................70

5.4.2單存儲路徑故障..................................................71

5.4.3InMeiro中，仲裁站點路徑故障....................................72

6總結(jié)........................................................................74

7術(shù)語&縮略語................................................................75

AS53OO/55OOG2主機OS雙活最佳實踐

1存儲雙活（InMetro）

1.1InMetro概覽

1.1.1InMetro功能與應(yīng)用場景

InMetro高可用性功能，可以在硬件故障、電源故障、連接故障或火災(zāi)、洪水等白

然災(zāi)害發(fā)生時，保證業(yè)務(wù)的連續(xù)性。

在可長達300公里的距離提供兩個站點都可訪問的高可用卷，如果任一站點的節(jié)

點或存儲設(shè)備脫機，另?聯(lián)機的站點保持最新的數(shù)據(jù),InMeiro自動實現(xiàn)故障轉(zhuǎn)移，

訪問聯(lián)機的副本.當(dāng)故障恢夏后，InMetro實現(xiàn)自動重新同步兩份副本。

InMetro適用于業(yè)務(wù)不可中斷，對業(yè)務(wù)連續(xù)性要求較高和可靠性要求較高，支持多

種場景故障的應(yīng)用場景，具體可以支持以下維護或故障場景：

?存儲維護（在線/離線）

?站點維護

?數(shù)據(jù)在線遷移

?存儲故障（計劃內(nèi)/計劃外）

?站點故障（計劃內(nèi)/計劃外）

1.1.2InMetro架構(gòu)

?主機、節(jié)點、存儲都有Si〔e概念，應(yīng)用從本地站點上的節(jié)點/存儲獲取I/O資

源。

?每個提供I/O訪問服務(wù)的數(shù)據(jù)卷由四個卷組成（1Master/1AUX/1Mater_CV/l

AUX_CV）o

?正常I/O數(shù)據(jù)流向從Mastcr->AUX。故障切換時，在AUX卷上模擬LUNID.

從而實現(xiàn)上層應(yīng)用的透明訪問。

AS53OO/55OOG2主機OS雙活最佳實踐

InMetro架構(gòu)如下：

圖1-1InMetro架構(gòu)

2酎80。

VC4U

Mc^el，必

Site3

1.1.3約束與限制

InMetro功能可在使用標(biāo)準(zhǔn)多路徑驅(qū)動程序的各種主機類型上工作，無需額外的主

機支持來訪問高可用性卷。多路徑驅(qū)動程序支持非對稱邏輯的元訪問（ALU/X）

時，存儲系統(tǒng)會向多路徑驅(qū)動程序通知最接近它的節(jié)點以及用于最小化1/O延遲

的節(jié)點。用戶只需要告訴存儲系統(tǒng)與主機連接的站點，系統(tǒng)會配置最佳的主機路

徑。推薦使用的多路徑驅(qū)動軟件。

雙活存儲的功能在使用時的規(guī)格限制如卜.表所示。

1-1InMetro規(guī)格限制

雙活功能使用規(guī)格屬性數(shù)值

每個集群支持的雙活關(guān)系個數(shù)1250

魚群支持的雙活最大容量2PR

單個10Group支持的雙活最大容量1PB

多路徑最多支掙數(shù)曳8條

AS53OO/55OOG2主機OS雙活最佳實踐

1.1.4優(yōu)勢

?對于應(yīng)用系統(tǒng)來說，訪問MirrorLUN而不需要關(guān)心后端的物理存儲。

?當(dāng)應(yīng)用系統(tǒng)與數(shù)據(jù)時，自動將與IO分流到本地和遠端的存儲系統(tǒng)，數(shù)據(jù)

實時同步，可以確保任意時間點的數(shù)據(jù)安全性：

?當(dāng)應(yīng)用系統(tǒng)讀數(shù)據(jù)時，應(yīng)用系統(tǒng)可以指定訪問最近的一臺存儲系統(tǒng)即可，

可以大大節(jié)省兩個數(shù)據(jù)中心之間的網(wǎng)絡(luò)傳輸帶寬；

?當(dāng)存儲系統(tǒng)故障時，采用Active-Active技術(shù)，可以保證應(yīng)用實時切換到

容災(zāi)中心，而不需要人工操作，保證了業(yè)務(wù)系統(tǒng)的高可用性，大大縮減了

故障切換時間。

?對于系統(tǒng)的效果。

?通過數(shù)據(jù)鏡像技術(shù)買現(xiàn)r生產(chǎn)陣列/容災(zāi)陣列的在線LUN的實時數(shù)據(jù)一

致，實現(xiàn)雙活存儲系統(tǒng)。

?任何一個存儲宕機或損壞，不影響主機應(yīng)用的連續(xù)性。

?用戶增減應(yīng)用形態(tài)變得簡單有效

?用戶的應(yīng)用系統(tǒng)可以非常方便的在合并的LUN上建立應(yīng)用的雙機或集群。

?部署快捷

數(shù)據(jù)雙活引擎部署過程無需對現(xiàn)有SAN架構(gòu)做任何物理層面的更改，只需要

通過FC線纜將引擎端口連接到現(xiàn)有的SAN網(wǎng)絡(luò)中；通過修改zone配置，即

可完成數(shù)據(jù)雙活架構(gòu)改造。整個初始化部署過程可在30分鐘內(nèi)完成。

1.2InMetro設(shè)計需要考慮的點

主機上多路徑程序要支持ALUA(非對稱邏輯集元訪問)。

理想情況下，用于InMctro桎置的三個故障域中的每一個都在單獨的建筑物中，并

有單獨的電源供電。雖然這種配置為所有可能的故障和災(zāi)難情況提供了最高級別的

保護，俱實際實施過程中也不是必須的，但如果不這樣相應(yīng)就會降低能夠保護的級

別。如果沒有第三個建筑物，將包含活動仲成磁盤的故障城放在其他兩個故障域中

的一個的建筑物里也可以，這種情況卜要遵循以卜規(guī)則：

?每個故障域必須由獨立電源或不間斷電源供電(UPS):

AS53OO/55OOG2主機OS雙活最佳實踐

?用于活動仲裁磁盤的存儲控制器必須與用于客戶數(shù)據(jù)的存儲控制器分開：

?每個故障域必須在獨立和隔離的存儲區(qū)域網(wǎng)絡(luò)上（單獨的布線和開關(guān)）；

?來自?個故障域的所有.行線（電源，SAN和Intemei協(xié)議（IP））不能通過另

一個故障域進行物理路由：

?每個故障域必須放在單獨的防火隔間中：

?可以使用不同的方式部署InMetro解決方案

?每個站點一個I/O組

?每個站點兩個1/0組

?一個站點兩個1/0組，另一個站點一個I/O組

?一個站點三個12組，另一個站點一個I/O組

實際采用的解決方案可以根據(jù)客戶端，工作負載和可用性要求而有所不同。

當(dāng)一個應(yīng)用程序使用了多個雙活卷，需要保持數(shù)據(jù)?致性時，可以為多個雙活卷創(chuàng)

建一致性組。

1.2.1InMetro配置

InMetro配置的節(jié)點必須通過FC或FC1P鏈路相互連接。這些連接提供節(jié)點到節(jié)

點通信和主機訪問控制器節(jié)點的路徑。InMetro支持在故障域之何進行集群內(nèi)節(jié)

點間通信的三種方法：

?將每個存儲節(jié)點連接到本地和遠程故障域中的FC交換機。因此，所有節(jié)點

到節(jié)點的流量都可以在不經(jīng)過交換機間鏈路（ISL）的情況下進行。這種方法

被稱為InMeiroNo1SL配置。

?將每個存儲打點只連接到本地FC交換機，并在故隙域之間為節(jié)點到節(jié)點的流

量配置ISL。這種方法被稱為InMetroISL配置。

?將每個存儲節(jié)點只連接到本地FC交換機，并在故障域之間配捏FCIP以實現(xiàn)

節(jié)點到節(jié)點的流量。這種方法被稱為InMetroFCIP配直。

不使用ISL的故障域之間的最大距離限制在40公里。這個限制是確保可能發(fā)生的

I/O流量中的任何突發(fā)情況都不使用所有緩沖區(qū)到緩沖區(qū)（bulTcr-Qbuffcr）（BB）

信用。鏈路速度也受到節(jié)點之間電纜長度的限制。

AS53OO/55OOG2主機OS雙活最佳實踐

下表列出了每個存儲InMeiro配苴支持的距離及其相關(guān)版本和端口這度要求。

配置選項AS5300/5500G2版本最大支持距離最大鏈路速度

NoISL3.1及后續(xù)版本<40km2Gbps

ISL3.1及后續(xù)版本<300km2,4,8,或16Gbps

FCIP3.1及后續(xù)版本<300km2,4,8,或16Gbps

NoISL配置

優(yōu)勢：

?HA解決方案分布在兩個獨立的數(shù)據(jù)中心。

?該配置與標(biāo)準(zhǔn)AS53OO/55OOG2類似。

?硬件的支持(Hardwarccffort)是有限的?？梢允褂肳DM設(shè)備，但不是必須的。

要求：

?故障域間每個I/O組有四個專用光纖處路(每個I/O組有兩個節(jié)點，因此需

耍八個鏈路)。

?存儲節(jié)點之間不使用ISL,

?被動WDM(passiveWDM)設(shè)備可以在故障域之間使用。

?可以在故障域之間使用主動或被動WDMo

?不使用WDM,K:波小型可插拔(Iongwavesmallfcrni-factcrphiggables)(SFPC

需要達到10公里。

?使用WDM,支持的距離可達40公里。

?站點1和站點2之間的兩個獨立光纖鏈路必須配置WDM連接，

?第三個故障域需要放置仲裁盤。

?仲裁磁盤存儲系統(tǒng)必須通過FC連接。

卜圖說明了InMeiroNoISL配置的高級視圖。

圖1.2NoISL配置

AS53OO/55OOG2主機OS雙活最佳實踐

zone要求：

無ISL配置的InMetro分區(qū)要求與存儲標(biāo)準(zhǔn)配置的分區(qū)要求相同。

?服務(wù)器只能訪問存儲節(jié)點。從服務(wù)器到后端存儲不存在直接訪問。

?為節(jié)點到節(jié)點流量配置單獨的分區(qū)。

?除了分區(qū)之外，還可以使用端口屏蔽來隔離特定存儲節(jié)點FC端n上的節(jié)點到

節(jié)點流量。端口屏蔽功能使用chsysiem-localfcponmask命令啟用。

?同一個I/0組的存儲節(jié)點通過控制柜內(nèi)部PCI和FC1/0進行通信。

?如果用戶虛擬化外部存儲，則分區(qū)一定不包含多個后端磁盤系統(tǒng)。捋個存儲

節(jié)點必須使用專用FC端口作為外部存儲控制器工作負載。

下圖說明r在故障域1和2之間使用被動WDM連接的無ISL配置的存儲InMciro。

圖1-3NoISL（使用被動WDM）

AS53OO/55OOG2主機OS雙活最佳實踐

故障域1故障域2

AS530ft/5500G2存儲光纖端=1的首選實踐

AS53OO/55OOG2可以為每個安裝節(jié)點提供最多四個8Gbps4端口光纖通道HBA

功能。

?專用兩個FC端口進行節(jié)點到遠程站點節(jié)點通信。將這些端口直接連接到遠程

站點的交換機。

?使用其他FC端口進行］：機和存儲連接.若可能.將存儲工作負載與該主機分

離。將這些端口連接到本地的交換機。

?通過使用專用于存儲工修負載的相同端口來訪問第三個站點仲裁設(shè)備。

?在AS5300/5500G2存儲，配置專用于節(jié)點到節(jié)點連接的端口的localfcportmask

值。使用交換機分區(qū)確保節(jié)點到遠程站點通信時使用專用于此目的的兩個FC

端口。

ISL配置

這種配置被認為是理想的。存儲I/O組跨兩個故障域分布，故障域之間的節(jié)點到

節(jié)點通信通過ISL執(zhí)行。

使用ISL可將存儲InMetro配置支持的距離增加到300公里。盡管最多支持距離為

AS53OO/55OOG2主機OS雙活最佳實踐

300公里，但主機相關(guān)I/O必須多次穿越長距離鏈路。因此，相關(guān)的性能下降可能

超過可接受的范圍。為了減少這種可能性，可以將故障城之間的距點限制到150公

里（推薦將故障域之間的距離限制在150公里最小化遇到的響應(yīng)時間提高而增加

的風(fēng)險）

優(yōu)勢：

?ISL使故障域之間的距碑可以大于40公里。

?主動和被動WDM設(shè)備可以在故障域之間使用。

?使用WDM支持的距離可達300公里。

要求：

?四個必需的專用FC端口，故障域之間每個I/O組的每個巾點使用兩個端口。

?使用ISL進行節(jié)點到節(jié)點通信需要配置兩個單獨的SAN：

?一個SAN專用于存儲節(jié)點到節(jié)點通信。該SAN稱為私有SAN.,

?一個SAN專用于主機和存儲控制器連接。這個SAN被稱為公共SANo

?每個SAN必須至少有一個用于冗余的ISL,并且由ISL提供的帶寬必須

大小正確。

?在存儲InMciro中，站點之間的節(jié)點到節(jié)點通信的最小帶寬是兩個站點中所有

主機的寫入吞吐量峰值。僅當(dāng)在一個站點的主機訪問所有卷時，此帶寬是足

夠的。在下面這些情況下，InMeir。集群需要站點之間的額外帶寬：

a）InMetro卷山不同站點的主機并發(fā)訪問。

b）不同站點的InMetro卷的兩個副本正在同步（初始化或運行中斷時的同

步＞。

0主機失去了與本地站點I/O組的所有路徑（因此訪問遠程站點的I/O組）。

由于本地I/O組的兩個節(jié)點脫機或SAN故障，這種情況可能發(fā)生。

場景c需要公共SAN中的額外的站點間帶寬。方案a和b在私有SAN中需

要額外的站點間帶寬。情景b和c是多次故障或大停機的結(jié)果。場景a可能

在正常運行過程中發(fā)生。

為了確保在所有工作負載條件下InMetro集群的完美運行，站點之間的節(jié)點到

節(jié)點通信的帶寬需要是這些數(shù)字的總和：對于從同一站點中的主機訪問的卷的

寫入吞吐后峰值，以及從不同的站點的主機并行訪問的卷的讀取峰值和兩倍的

寫入吞吐戰(zhàn)峰值.

AS53OO/55OOG2主機OS雙活最佳實踐

?第三個故障域需要放苴仲裁磁盤。

?包含仲裁磁盤的存儲控制器必須通過FC連接。

?為節(jié)點到仲裁流成保證至少彳j2MB的帶寬。

?在故障域之間的連接不超過一個ISL跳。

私有和公共SAN可以通過使用以下任意一個方法來實現(xiàn)：

?每個SAN專用FC交換機

?交換機分區(qū)功能

?虛擬或邏輯結(jié)構(gòu)

分M要求：

InMetroISL配置需要私有和公共SAN。必須根據(jù)以下規(guī)則配置兩個SAN：

?每個存儲節(jié)點的兩個端口都連接到私有SAN,

?其他端口連接到公共SAN。

?私有SAN需要一個交換機之間的中繼線。

?主機和存儲系統(tǒng)連接到公共SAN。

?如果用戶虛擬化外部存儲，則分區(qū)一定不包含多個后端磁盤系統(tǒng)。每個存儲

節(jié)點必須使用專用FC端口作為外部存儲控制器工作負載。

?除了分區(qū)之外，還可以使用端口屏蔽來隔離特定存儲節(jié)點FC蠟口上的節(jié)點到

節(jié)點流量。端II屏蔽功能使能chsysiein-localfcporlmask命令。

?故障域3(仲裁磁盤)必須連接到公共SAN”

?屬于私有SAN的ISL不得與其他流炭共享，并且不得超額認購(oversubscribed)。

存儲InMetroISL配置如下圖所示。私有和公共SANs在四個物理交換機中的將一

個上都表示為邏輯交換機。

圖1-4ISL配置

AS53OO/55OOG2主機OS雙活最佳實踐

故障域2

故障域1

下圖說明了在故障域I和2之間采用主動或被動WDM的存儲InMeiroISL配置。

私有和公共SAN在四個物理交換機中的每一個上都表示為邏輯交換機.

圖1-5ISL使用主動儆動WDM

AS53OO/55OOG2主機OS雙活最佳實踐

故障域2

故障域1

AS5300/5500G2存儲光纖端口的首選實踐

AS5300/5500G2可以為每個安裝節(jié)點提供最多四個8Gbps4端口光纖通道HBA

功能。

?專用兩個FC端口進行節(jié)點到遠程站點節(jié)點通信。將這些端匚直接連接到遠

程站點的交換機。

?使用其他FC端口進行主機和存儲連接，若可能，將存儲工作負載與該主機分

離。將這些端口連接到木地的交換機。

?通過使用專用于存儲工作負載的相同端口來訪問第三個站點仲祓設(shè)備。

?在AS53OO/55OOG2存儲,配置專用于節(jié)點到節(jié)點連接的端口的localfcportmask

值。使用交換機分區(qū)確保節(jié)點到遠程站點通信時使用專用「?此I」的的兩個FC

端口。

AS53OO/55OOG2主機OS雙活最佳實踐

FCIP配置

在此配置中,FCIP鏈路在故障域之間使用。此配置是描述的ISL配置的一個變體，

因此許多相同的要求也適用。

優(yōu)勢：

FCIP配置使用現(xiàn)有的IP網(wǎng)絡(luò)進行擴展拒離連接。

要求：

?它需要在故障域之間至少兩個FC1P隧道。

?使用ISU進行節(jié)點到節(jié)點通信需要配苴兩個單獨的SAN：

?一個SAN專用于存儲節(jié)點到節(jié)點通信。該SAN稱為私有SAN.,

?一個SAN專用于主機和存儲控制器連接。這個SAN被稱為公共SANo

?每個SAN必須至少有一個用于冗余的ISL,弁且由ISL提供的帶寬必須

大小正確。

?在存儲InMetro中，站點之間的節(jié)點到節(jié)點通信的最小帶寬是兩個站點中所有

主:機的寫入吞吐量峰值。只有在一個站點的主:機訪問所有卷時，此帶寬就足

夠了。在下面這些情況下，InMeir。集群需要站點之間的額外帶寬：

a）InMetro卷山不同站點的主機并發(fā)訪問。

b）不同站點的InMetro卷的兩個副本正在同步（初始化或運行中斷時的同

步）。

o主機失去r與木地站點i/o組的所有路徑（因此訪問遠程站點的DO組）。

由于本地I/O組的兩個節(jié)點脫機或SAN故障，這種情況可能發(fā)生。

場景c需耍公共SAN中的額外的站點間帶寬。方案a和b在私有SAN中需

要額外的站點間帶寬。情母b和c是多次故障或大停機的結(jié)果。場景a可能

在正常運行過程中發(fā)生。

為了確保在所有工作負載條件下InMetro集群的完美運行，站點之間的節(jié)點到

節(jié)點通信的帶寬需要是這些數(shù)字的總和：對于從同一站點中的主機訪問的卷的

寫入吞吐量峰值，以及從不同的站點的主機并行訪問的卷的讀取峰值和兩倍的

寫入吞吐量峰值。

?第三個故障域需要放置仲裁磁盤。

AS53OO/55OOG2主機OS雙活最佳實踐

?包含仲裁磁盤的存儲控制器必須通過FC連接。

?為節(jié)點到仲裁流量保證至少有2MB的帶寬。

?故障域3（仲裁磁盤）必須是FC或FCIP連接。如果是FCIP連接，到仲裁磁

盤的響應(yīng)時間不能超過80ms。

?包含仲裁磁盤的存儲控制器必須是FC或FCIP連接。

?在故障域之間的連接不超過一個ISL跳。

私有和公共SAN可以通過使用以下任意一個方法來實現(xiàn)：

?每個SAN專用FC交換機

?交換機分區(qū)功能

?虛擬或邏輯結(jié)構(gòu)

分區(qū)要求：

InMetroFCIP配置需要私有和公共SAN,必須根據(jù)以下規(guī)則配置兩個SAN：

?每個存儲節(jié)點的兩個端口都連接到私有SAN。

?其他端口連接到公共SAN。

?私有SAN需要一個交換機之間的中維線。

?主機和存儲系統(tǒng)連接到公共SANo

?如果用戶虛擬化外部存儲，則分區(qū)一定不包含多個后端磁盤系統(tǒng)。每個存儲

節(jié)點必須使用專用FC端口作為外部存儲控制器工作負載。

?除了分區(qū)之外，還可以使用端口屏蔽米隔離特定存儲節(jié)點FC端口上的節(jié)點到

節(jié)點流出端口屏蔽功能使能chsystem-localfcportmask命令。

?故障域3《仲裁磁盤）必須連接到公共SAN.

?屬于私有SAN的ISL不得與其他流量共享，并且不得超額認購（oversubscribed）。

下圖說明了存儲InMetroFCIP配置。

圖1-6FCIP配置

AS53OO/55OOG2主機OS雙活最佳實踐

FC交換機FC在悔機

故障域3

AS5300/5500G2存儲光纖端口的首選實踐

AS53OO/55OOG2可以為每個安戟節(jié)點提供最多四個8Gbps4端口光纖通道HBA

功能。

?專用兩個FC端口進行節(jié)點到遠程站點節(jié)點通信。將這些端匚直接連接到遠

程站點的交換機。

?使用其他FC端口進行主機和存儲連接，若可能，將存儲工作貨載與該主機分

離。將這些端口連接到本地的交換機。

?通過使用專用于存儲工作負載的相同端口來訪問笫三個站點仲裁設(shè)備。

?在AS5300/5500G2存儲,配置專用于節(jié)點到節(jié)點連接的端口的localIcportmask

值。使用交換機分區(qū)確保節(jié)點到遠程站點通信時使用專用「?此H的的兩個FC

端口。

AS53OO/55OOG2主機OS雙活最佳實踐

1.2.2光纖通道距離設(shè)置

使用長波（LW）SFP是克服長距離的一種合適的方法。支持主動和被動密集波分

復(fù)用（DWDM）和粗波分或用（CWDM）技術(shù)。

被動WDM設(shè)備本身不能改變波長。需耍使用彩色SFP,并且交換機供應(yīng)商必須

支持。

主動WDM設(shè)備可以自己改變波長。

緩沖區(qū)信用（buffer-io-buffercredm）（也稱為緩沖區(qū)到緩沖區(qū)（BB）信用〉用于FC

流發(fā)控制。它們表示端口可以存儲的幀數(shù)。每次端口發(fā)送幀時，該端口的BB信

用減1。對于接收到的每個R_RDY,該端口的BB信用增加I。如果BB信用為

零，則在接收到R_RDY之前，對應(yīng)的端口不能發(fā)送。

因此，緩沖區(qū)到緩沖區(qū)信用是必要的，以便在快速傳輸中（inflighl，具有多個FC

幀（圖1-7）。需要適當(dāng)數(shù)坦的緩沖區(qū)到緩沖區(qū)信用才能達到最佳狀態(tài)性能。在

一定距離內(nèi)實現(xiàn)最大性能的緩沖區(qū)信用量取決「鏈路的速度。

圖1-7快速傳輸中的緩沖區(qū)信任

6FCfromes02Gb

2GbFClinkI??.三三”

8GbFClinkiIdffi"砰0【I【111：11111111】三—…;a

7FCfrancs@80b（8B2Bcreditsoniy）

8GbFClinkBlEl.由向白?............

該計算假定鏈路的另一端在接收端的最后一位到達接收端的同一時刻開始發(fā)送

R_RDY確認幀。這種情況是不正確的。以下指南提供了最少的數(shù)字。如果他路

距離和鏈路速度存在緩沖區(qū)信用不足，則性能將顯著下降。下表說明了BB信用

與距離之間的關(guān)系。

表1-2緩沖區(qū)信用

FC掛路速度【0km緩沖區(qū)信用

1Gbps5

2Gbps10

4Gbps20

AS53OO/55OOG2主機OS雙活最佳實踐

8Gbps40

16Gbps80

AS53OO/55OOG2FCHBA提供的緩沖區(qū)到緩沖區(qū)信用的數(shù)量有限。HBA端口提供

41個緩沖區(qū)信用額度，這些額度足以以8Gbps的速度進行1（）公里的距離傳輸。

這些數(shù)字由HBA的硬件決定，不能更改。

StorwizeV7000Genl和Gen2仍然為8GbpsPC端U提供41緩沖X信用，為16

GbpsFC端口提供80緩沖區(qū)信用。在撰寫本書時（2015年II月），IBM公布了

發(fā)布4端口l6GbFC適配器的意向聲明，對于每個端口，將提供41個緩沖區(qū)信

用。（確認當(dāng)前Indigo端口交型對應(yīng)的緩沖區(qū)信用）批注[AJ1]:

FC交換機具有BB信用的默認設(shè)置.（在IBMb型/Brocade交換機中，每個端口

的默認值為8個BB.）盡管StorwizeV7000HBA提供41個BB信用，但交換機批注IAJ2I：

保持默認值。因此，您必須手動調(diào)整交換機BB信用。對于Breade交換機，可

以使用puncfgfportbuffcrs命令更改端口緩沖區(qū)信用。

1.3InMetro實施需要考慮的點

1.3.1規(guī)劃注意事項

在實施之前，必須在物理資源和連接要求方面進行容笊規(guī)劃.最好開始先盡可能

多的收集工作負載信息。工作負載分析可幫助確定I/O組（控制柜）的數(shù)量以及

磁盤驅(qū)動器的類型和數(shù)量。

使用InMetro配置,由于工作負載分布影響連接要求，因此/解站點之間的1：作負

教分配也很重要。低估連接資源可能導(dǎo)致性能不佳的解決方案。

確保連接設(shè)備，主機，I/O棧組件（HBAfirmware,設(shè)備驅(qū)動器，多路徑）的版本

支持AS53OO/55OOG2

批注（HF3]:何思3

AS5300/5500G2V3.1XX?持的硬件列表，設(shè)各物動，，■件和推薦的軟件版本.

涉及HBAFW、driver,多路徑兼容列表.

■參考?

IBV雙活文檔里以族接形式提供：hllM/www-

O/sui/docview.id=ss￡1S1009559

鏈接內(nèi)容較多，部門是否有對應(yīng)文檔、鏈接提供兼

容性列表.

AS53OO/55OOG2主機OS雙活最隹實踐

主動-主動SyncCopy注意事項

InMetro功能基于SyncCopyactive-active選項。這個SyncCopyactive-active選