【正文】 庫時我們按照SIZ方式劃分為2個zone區(qū)域，由上圖可見HBA在Switch中的端口分別屬于Zone1和zone2。 建議的分區(qū)分組方法是單個啟動程序分區(qū)（SIZ ） ，有時被稱為“單HBA的分區(qū)。區(qū)域成員首先有基于一個主機訪問存儲端口的需要。pWWN識別比D，P識別可以更安全，因為物理上被電纜連接到端口的任何設(shè)備可以不適當(dāng)?shù)販?zhǔn)許存儲存取未經(jīng)授權(quán)的主機。分區(qū)和LUN masking相結(jié)合，提供了兩個層次的安全，即使當(dāng)其中一層被錯誤配置時，也可防止對一個LUN的不適當(dāng)訪問。目前，分區(qū)幾乎總是用來組合存儲端口和主機。當(dāng)你在一個SAN使用分區(qū)時，節(jié)點可以是多個區(qū)域的成員，這體現(xiàn)了很大的靈活性。只有當(dāng)業(yè)務(wù)主機進行LANFree備份時會通過Routing功能跨背板進行數(shù)據(jù)傳輸。例如：核心生產(chǎn)區(qū)的業(yè)務(wù)主機部署在VF1區(qū)，連接在端口卡1上，DMX、EVA存儲分配給這套系統(tǒng)得存儲LUN部署在VF2區(qū)，但端口同樣連接在端口卡1上。所謂本地化，就是主機要訪問的存儲和主機盡可能連接到同一個交換機或者端口卡上，從而實現(xiàn)本地交換機內(nèi)部交換。所謂超載比，就是每個交換機的對外部端口和對內(nèi)端口的比值。劣勢是一個SAN網(wǎng)絡(luò)端口過多帶來的管理難度與故障率增高，并且在連接新的SAN交換機時需要配置其DomainID與Zoning信息不能與核心交換機沖突。本項目中，我們采用多條4GB鏈路聚合的方式將Edge Fabric與Core Fabric互連。劣勢是交換機之間的跳數(shù)只能1跳，并且如果通過FCR做數(shù)據(jù)交互會帶來一定的性能影響。物理分級在SAN網(wǎng)絡(luò)中也分為2種架構(gòu)：一種為通過Routing的方式將小型SAN網(wǎng)絡(luò)串接在SAN導(dǎo)向器上，另一種方式通過ISL擴展的方式將小型SAN網(wǎng)絡(luò)融入核心交換機中的某一個VF中。將相關(guān)聯(lián)的業(yè)務(wù)主機以及與其相關(guān)的存儲設(shè)備端口劃分在同一塊端口卡內(nèi)，VF5中的存儲設(shè)備按需求分別連接到各自業(yè)務(wù)系統(tǒng)的virtual fabric上，實現(xiàn)與業(yè)務(wù)系統(tǒng)的隔離和自治、互通。導(dǎo)向器可以添加長波端口板與FCIP端口板，用于遠(yuǎn)程容災(zāi)設(shè)計的使用。每個Virtual Fabric具備獨立管理的Domain根據(jù)應(yīng)用層次，可根據(jù)應(yīng)用層次、服務(wù)水準(zhǔn)或操作系統(tǒng)劃分管理區(qū)域。ID%的高可用性。2．SAN網(wǎng)絡(luò)方案設(shè)計 SAN網(wǎng)絡(luò)整體架構(gòu)設(shè)計在遼寧移動GEDC項目中SAN架構(gòu)設(shè)計方面，我方建議采用coreedge 核心邊緣的架構(gòu)設(shè)計方式。能夠在統(tǒng)一的架構(gòu)下分離不同的業(yè)務(wù)系統(tǒng)，使各業(yè)務(wù)系統(tǒng)獨立自制并且隔離不同業(yè)務(wù)系統(tǒng)之間的廣播干擾。交換設(shè)備過多而沒有統(tǒng)一的管理，為管理者帶來管理效率問題。光纖交換交換機概況：光纖交換交換機提供廠商已使用端口速率DOMAIN ID備注博科64PORTEMC504GB/S1　博科32PORT(up)HP214GB/S3　博科32PORT(down)HP234GB/S2　博科64PORT　04GB/S　新到貨另外還有1臺新到貨Brocade 4900B 64口交換機總共是2臺64口，2臺32口交換機。如何將多個SAN孤島連接到一起進行數(shù)據(jù)互通，如何保障連接在一起的交換機不受到廣播風(fēng)暴的影響，如何對眾多的交換機進行統(tǒng)一的管理，在今后的業(yè)務(wù)發(fā)展中如何對SAN網(wǎng)絡(luò)進行快速的擴展部署，如何實現(xiàn)SAN架構(gòu)的容災(zāi)模式，成為當(dāng)前SAN網(wǎng)絡(luò)整合中所面臨的幾大重要問題。 但是，許多大型數(shù)據(jù)中心通常有幾個SAN，每個用于支持不同的應(yīng)用或機構(gòu)需求。對于SAN, 這就意味著進行前所未有的大規(guī)模整合，并通過存儲及網(wǎng)絡(luò)虛擬化方面的改進提高可管理性。當(dāng)今的數(shù)據(jù)中心SAN可將存儲資源整合并分配給一系列運行著高級應(yīng)用的服務(wù)器。在這些環(huán)境中，SAN一般在彼此之間或與企業(yè)中的工作組和中型系統(tǒng)并不集成，主要原因是，并非企業(yè)中的所有部門或工作組均需要共享所有的數(shù)據(jù)，因此，盡管 SAN 從理論上能夠擴展到幾千個節(jié)點，但實際上這種情況很少發(fā)生。 遼寧移動網(wǎng)管SAN網(wǎng)絡(luò)現(xiàn)狀在遼寧移動網(wǎng)管中心中已經(jīng)存在了完整的SAN架構(gòu)網(wǎng)絡(luò)，其由1臺Brocade 4900B 64口交換機和2臺Brocade 4100B 32口交換機組成端口冗余的網(wǎng)絡(luò)架構(gòu)。以上現(xiàn)狀表明遼寧移動網(wǎng)管系統(tǒng)的SAN網(wǎng)絡(luò)現(xiàn)狀目前面臨著幾個待解決問題：端口不足，目前剩余34端口，無法滿足今后GEDC項目中大量新增業(yè)務(wù)系統(tǒng)的接入需求。數(shù)據(jù)中心機房存在單點故障，當(dāng)機房故障沒有容災(zāi)SAN架構(gòu)接管業(yè)務(wù)。能夠按業(yè)務(wù)系統(tǒng)對存儲系統(tǒng)進行訪問，不同的業(yè)務(wù)系統(tǒng)訪問相應(yīng)的存儲。采用2臺導(dǎo)向器級別的SAN交換機替換現(xiàn)有的1臺64口與2臺32口交換機組成的冗余模式架構(gòu)，作為整個網(wǎng)管系統(tǒng)的核心，整合所有的業(yè)務(wù)主機、存儲系統(tǒng)及帶庫。在本次項目中使用中高端存儲、交換、備份設(shè)備，%。Virtualization）可以實現(xiàn)分區(qū)管理以及故障隔離，當(dāng)某一個Virtual Fabric中發(fā)生故障可以隔離不同virtual fabric間的廣播風(fēng)暴。通過以上整體架構(gòu)設(shè)計，我方建議在本次遼寧移動GEDC項目中新采購的128端口SAN導(dǎo)向器可以劃分6個Virtual Fabric環(huán)境，其中VF0作為Base, 相當(dāng)于SAN路由器，不連接任何設(shè)備，只負(fù)責(zé)連接其他virtual fabric。同時各業(yè)務(wù)系統(tǒng)的virtual fabric又通過base與備份區(qū)VF4連通，共享備份區(qū)內(nèi)的備份設(shè)備，備份區(qū)內(nèi)連接備份服務(wù)器、VTL虛擬帶庫以及PTL物理帶庫。本期項目中會針對于不同系統(tǒng)的不同訪問方式分別采用這兩種分級連接架構(gòu)。BackBone是所有在SAN導(dǎo)向器上的端口，設(shè)備可以通過LSAN_zone從Back Bone輸出到其他edge Fabric。所涉及的Edge Fabric為安全管理區(qū)以及測試開發(fā)區(qū)。在數(shù)據(jù)量交互較大時仍然需要將多條鏈路聚合。當(dāng)然，為了確保性能，最好是具有1:1的超載比，才能確保性能充分發(fā)揮。在簡單網(wǎng)絡(luò)環(huán)境中，本地化設(shè)計比較容易實現(xiàn)；但隨著網(wǎng)絡(luò)復(fù)雜性的提升，本地化基本上不可能實現(xiàn)。這樣雖然VF1與VF5互通需要routing功能，但保證數(shù)據(jù)流在一塊卡內(nèi)。但備份作業(yè)一般在業(yè)務(wù)不繁忙的夜間進行，因此不會給業(yè)務(wù)系統(tǒng)帶來壓力。 分區(qū)不僅阻止主機免受未授權(quán)的存儲資產(chǎn)訪問，而且可以停止不受歡迎的主機到主機的通信和全fabric的注冊狀態(tài)變更通知（ RSCN ）的中斷 。分區(qū)允許主機訪問某個存儲陣列特定端口上的所有LUNs。 因此在SAN網(wǎng)絡(luò)中始終實施分區(qū)，不論是否使用LUN masking。包括在使用光纖通道路由FCR時，同樣適用PWWN識別。主機彼此之間很少需要直接互動，且存儲端口由于其作為目標(biāo)的本性從未發(fā)起SAN交通。 ” 與SIZ ，每個區(qū)域只有一個單獨的HBA卡和一個或多個存儲端口。分離磁盤和磁帶設(shè)備到單獨的區(qū)域防止磁盤RSCNs沖擊磁帶設(shè)備，這往往是更敏感的RSCNs 。設(shè)備之間通過LSAN_zone方式互聯(lián)，但為了保證VF之間、Core Fabric與Edge Fabric之間無關(guān)系統(tǒng)的隔離，需要對SAN路由作詳細(xì)設(shè)計。必要時各個生產(chǎn)區(qū)的存儲可以與開發(fā)測試區(qū)的存儲互通，將數(shù)據(jù)由存儲設(shè)備直接推送到開發(fā)測試區(qū)存儲上，用于測試。Virtualizationport 每個NPIV設(shè)備有獨立的deviceWWN，執(zhí)行同F(xiàn)abric中其他端口相同的功能。N_Portloginport連接的設(shè)備。當(dāng)這些虛擬機需要連接存儲資源池中的LUN時，需要通過虛擬機的虛擬端口影射到刀片機籠的內(nèi)聯(lián)FC端口，再通過外聯(lián)FC端口連接到SAN導(dǎo)向器上識別存儲資源池中的LUN。打開和關(guān)閉port的NPIV功能。10): switch:admin指定數(shù)據(jù)流傳輸?shù)膬?yōu)先級別,可以將NPIV連接線的內(nèi)部劃分成高，中，低三個優(yōu)先級別，高優(yōu)先級獲得最高的帶寬，而低優(yōu)先級別獲得最低的傳輸帶寬。 VF0路由區(qū)域劃分VF0作為Base, 相當(dāng)于SAN路由器，不連接任何設(shè)備，只負(fù)責(zé)連接其他virtual fabric, 并且隔離不同virtual fabric間的廣播風(fēng)暴。VF1還具備5端口的擴展能力，在近期內(nèi)能夠充分滿足用戶對核心數(shù)據(jù)庫區(qū)的擴展需求。（如需要實現(xiàn)負(fù)載均衡則需要添加Trunking License）。在VF3中大量應(yīng)用服務(wù)器以虛擬機的形式存在，因此要求涉及連接的所有交換機都支持NPIV的劃分方式。VF1VF3生產(chǎn)環(huán)境的Virtual Fabric通過VF0 Base Virtual Fabric Rounting功能與備份區(qū)互通，設(shè)置交換機的LSAN，將相關(guān)的設(shè)備分配到相應(yīng)的LSAN Zone中。cfgAdd “config1”, “l(fā)san_stn_w2k_hdsB。VF1VF3計算資源區(qū)的VF同樣通過VF0 Base Virtual Fabric Rounting功能與存儲資源區(qū)互通，設(shè)置交換機的LSAN，將相關(guān)的設(shè)備分配到相應(yīng)的LSAN Zone中。TIMP系統(tǒng)所使用的EVA4000磁盤陣列配置2個控制器，每控制器4個前端端口，設(shè)計連接到VF5區(qū)中的端口卡1上。將占用2和3端口板各4個端口。 Edge Fabric區(qū)域劃分Edge Fabric區(qū)域主要是用于核心交換機連接邊緣交換機用于擴展核心交換機的端口擴展能力。由于僅僅通過Rounting功能進行數(shù)據(jù)備份，因此32口4100B交換機不需要太多端口連接到SAN導(dǎo)向器，建議采用24條鏈路。在測試區(qū)交換機與核心SAN導(dǎo)向器間的路由原則為，通過LSAN的劃分，使測試區(qū)與VF4備份區(qū)互通，這樣可以保證備份服務(wù)器可以將核心區(qū)備份的數(shù)據(jù)恢復(fù)到測試區(qū)進行測試、開發(fā)。 SAN網(wǎng)絡(luò)擴展設(shè)計 為了保證在今后的業(yè)務(wù)發(fā)展GEDC數(shù)據(jù)中心要求SAN網(wǎng)絡(luò)可以實現(xiàn)基本無限制的擴展延伸，以達到更多服務(wù)器與存儲設(shè)備的接入，適應(yīng)GEDC機房的健康成長與快速部署。端口板擴展在近期內(nèi)最適用于本項目為了聯(lián)入更多系統(tǒng)而采用的SAN擴展方式。如下圖所示，在現(xiàn)有環(huán)境下右邊部分配置添加端口卡。以Brocade DCX為例：雙機箱串聯(lián)配置可以達到13 Tbit/sec 聚合帶寬，768個通用FC端口，2 個domain；每個機箱4 個特殊的ICL 端口 (銅針) 來進行機箱的互連，每個ICL端口包含16個8G FC連接， Tbit/sec集合帶寬，ICL保留128個8G E_port來連接兩個機箱。分配好的端口將從Default Switch中移出。兩臺DCX物理鏈路互通。我們會在后面SAN Distance extended中詳細(xì)描述。具體可分為2種方式，一種是采用光纖通道路由FCR的方式將多個SAN孤島連接擴展。這2種方式同樣構(gòu)成SAN邊緣擴展方式。ISL擴展模式稱為Cascading，主要作用是將現(xiàn)有SAN網(wǎng)或者Virtual Fabric中的交換機端口擴展，需要將新的交換機加入原有SAN中成為原有SAN網(wǎng)中的組組成部分，受Primary SAN交換機控制，分配zoning信息配置。使用環(huán)境拓?fù)淙缦拢?SAN遠(yuǎn)距離擴展容災(zāi)設(shè)計 根據(jù)本次GEDC項目要求，需要考慮未來本中心將會作為沈北數(shù)據(jù)中心的災(zāi)備中心的需求，我方在本節(jié)闡述SAN網(wǎng)絡(luò)在同城遠(yuǎn)距離擴展容災(zāi)方案。在設(shè)計過程中的兩個重要的概念為：恢復(fù)點目標(biāo)(RPO)和恢復(fù)時間目標(biāo)(RTO)。l 其他的一些技術(shù)如持續(xù)數(shù)據(jù)保護(CDP)能被用于適當(dāng)?shù)腞PO及RTO的場景。單模光纖總是用于光網(wǎng)絡(luò)的長距離延展甚至經(jīng)常用于同一數(shù)據(jù)中心內(nèi)部FICON的安裝中。為了解決這一問題，引入了色散位移光纖(DSF)，DSF在1550nm波長得到優(yōu)化，但當(dāng)部署在密集波分復(fù)用(DWDM)環(huán)境時又引入了另外的問題。以下任一種技術(shù)都能提供切實可行的長距離連接解決方案，但要選擇適合的方案取決于多種因素包括技術(shù)，成本或是可擴展性的需求。Brocade及其合作伙伴對于不同距離，已列出全部測試過合格的光收發(fā)器。另外在可能需要多個E_Ports的地方，有必要把他們分散到不同的port groups里以最大化可用的buffer credits數(shù)量。而節(jié)點之間的距離一般都能擴展到100km或更遠(yuǎn)。注意你應(yīng)當(dāng)“硬”設(shè)置FC端口速率到所期望的速率以確保WDM衰減器能鎖定這個ISL的比特率。多個ISLs通過網(wǎng)絡(luò)互聯(lián)以提供額外的帶寬和冗余以防交換機上或距離延展設(shè)備上的端口失效。通過采用FCIP方式實現(xiàn)存儲網(wǎng)絡(luò)的遠(yuǎn)程擴展， FCIP功能可以直接由SAN導(dǎo)向器中的FCIP模塊提供，這樣利用SAN導(dǎo)向器的可靠容錯機制，減少了外部設(shè)備和SAN交換機互連所產(chǎn)生的額外故障點，流量可以在SAN導(dǎo)向器交換機上的FCIP端口與其它存儲端口之間任意交換。要求為SAN網(wǎng)絡(luò)配置一種功能全面的網(wǎng)絡(luò)管理應(yīng)用平臺，可實現(xiàn)數(shù)據(jù)中心Fabric架構(gòu)的端到端管理。b. Traffic isolation指定特定設(shè)備使用特定的端口和路徑。有了這些數(shù)據(jù)流控制機制，客戶可以很好的分配和利用帶寬資源，為應(yīng)用程序服務(wù)，例如核心數(shù)據(jù)庫應(yīng)用為最核心業(yè)務(wù)，劃分為高優(yōu)先級，而OA、郵件則為低優(yōu)先級應(yīng)用，這樣，在業(yè)務(wù)流量最繁忙以至于達到瓶頸時，高優(yōu)先級別的業(yè)務(wù)獲得了更多的傳輸帶寬，保證了高優(yōu)先級別業(yè)務(wù)的服務(wù)水準(zhǔn)。在遼寧GEDC項目中如果用戶購買的存儲設(shè)備具備iSCSI功能，可以考慮適當(dāng)?shù)牟渴餴SCSI網(wǎng)絡(luò)架構(gòu)。這樣需要在計算主機端多分配適配卡（可以是普通以太網(wǎng)卡也可以是專用iSCSI適配卡）或以太端口，采用以太網(wǎng)交換機作為數(shù)據(jù)交換設(shè)備。這種搭建方式的優(yōu)勢是存儲網(wǎng)與業(yè)務(wù)網(wǎng)分離，不影響業(yè)務(wù)帶寬。因此遼寧移動已經(jīng)針對此狀況申請購買了如下存儲備份設(shè)備：設(shè)備類型數(shù)量容量中端存儲170TB虛擬帶庫1　DMX3磁盤76從現(xiàn)狀中我們不難發(fā)現(xiàn)，遼寧移動網(wǎng)管系統(tǒng)的存儲設(shè)備比較全面，但所面臨的最大問題就是資源不足，導(dǎo)致資源不足的原因有幾種：數(shù)據(jù)增長過快。雖然LTO3磁帶在備份數(shù)據(jù)時可以達到最大80MB/s左右的備份速度，8臺驅(qū)動器同時工作可以達到640MB/s左右，但80MB/s為理論值，實際環(huán)境中LTO3磁帶備份大容量任務(wù)時可以達到50MB/s，備份多個小