【文章內(nèi)容簡介】 不 同的設備連接到不同 virtual fabric 上即加入了相應的 virtual fabric。然后通過 Routing 的方式將多個 VF 以及 edge Fabric 連接在一起 ，共享備份設備。 設備之間通過 LSAN_zone 方式互聯(lián)，但為了保證 VF 之間、 Core Fabric 與 Edge Fabric 之間無關系統(tǒng)的隔離，需要對 SAN路由作詳細設計。 確保各個生產(chǎn)區(qū) VF 之間的主機與存儲不互通，確保測試開發(fā)區(qū)的主機與生產(chǎn)區(qū)的主機及存儲不互通。 保證每個生產(chǎn)區(qū) VF 的主機可以與備份區(qū) VF4 的 VTL 和物理帶庫互通，以實現(xiàn) LANFree備份。 確保開發(fā)測試區(qū)的主機和備份區(qū) VF4 的 VTL 和物理帶庫互通，以實現(xiàn)將歷史數(shù)據(jù)恢復到開發(fā)測試區(qū)用于測試研發(fā)。 必要時各個生產(chǎn)區(qū)的存儲可以與開發(fā)測試區(qū)的存儲互通，將數(shù)據(jù)由存儲設備直接推送到開發(fā)測試區(qū)存儲上，用于測試。 必要時各個生產(chǎn)區(qū)的主機可以與開發(fā)測試區(qū)存儲互通，用戶數(shù)據(jù)拷貝恢復。 SAN 網(wǎng)絡 NPIV 設計 N_Port ID Virtualization (NPIV) 將單個光纖端口虛擬成多個獨立的端口，為每個連接到該物理端口的不同類型操作系統(tǒng)提供獨立的端口標識（對每個操 作系統(tǒng)看起來就像有自己獨立的物理端口一樣）。 NPIV 分配一個獨立的 virtual port ID 給每個光纖通道協(xié)議設備。它允許你去分配虛擬地址而不影響現(xiàn)有連接和設備。虛擬端口有與 N_port 相同的屬性，因此能夠提供 Fabric 相關的所有服務。 每個 NPIV 設備有獨立的 device PID,Port WWN, 和 Node WWN，執(zhí)行同 Fabric 中其他端口相同的功能。也就是說， NPIV 虛擬出的多個 virtual devices 與連接在非 NPIV 端口的普通設備無異， zone 配置對于 NPIV 端口和非 NPIV 端口也沒有區(qū)別，能夠根據(jù) domain和 port 符號，或 WWN，或兩者兼有的方式劃分。對于完全由 virtual N_Port ID 構成的Zone，必須使用 WWNZone。 因為 對于 NPIV 端口如果使用 harddomain_id,Port)zone，并且所有的 virtual PID 使用的端口被配置在該 Zone 中，那么 port login (PLOGI)到一個不存在的 virtual PID 是不被 block的，相當于 FLOGI被發(fā)送到 NPIV port連接的設備。如果這個設備不能處理這種異常的 PLOGI 信號， 就應該使用 WWNbased zoning。 在本期 遼寧移動 GEDC 項目中存在大量刀片服務器，每臺刀片機種大約分配 5 臺左右的虛擬機。 當這些虛擬機需要連接存儲資源池中的 LUN 時，需要通過虛擬機的虛擬端口影射到刀片機籠的內(nèi)聯(lián) FC端口，再通過外聯(lián) FC端口連接到 SAN導向器上識別存儲資源池中的 LUN。在虛擬機 LUN 需求超過 75GB 時，建議采用 LDM 方式，通過 NPIV 連接存儲上的 LUN。再通過Zone 分區(qū)的方式將多個 NPIV 邏輯上分離，保證單一主機到單一存儲 LUN 的訪問。 連接 拓撲 圖如下： 圖 NPIV 配置： 使用 portCfgNPIVPort 打開和關閉 port 的 NPIV 功能。如下是一個具體的案例(Brocade 5100 port 10): switch:admin portCfgNPIVPort 10, 1 同時考慮到虛擬機內(nèi)各業(yè)務系統(tǒng)的重要程度不同，應可利用交換機端的 數(shù)據(jù)流控制機制，實現(xiàn) I/O 流量的控制管理 。 指定數(shù)據(jù)流傳輸?shù)膬?yōu)先級別 ,可以將 NPIV 連接線的內(nèi)部劃分成高，中，低三個優(yōu)先級別，高優(yōu)先級獲得最高的帶寬，而低優(yōu)先級別獲得最低的傳輸帶寬。有了這些數(shù)據(jù)流控制機制，客戶可以很好的分配和利用帶 寬資源，為應用程序服務，例如 虛擬機 SQL 數(shù)據(jù)庫 為 核心業(yè)務，劃分為高優(yōu)先級，而 文件歸檔等 則為低優(yōu)先級應用，這樣，在業(yè)務流量最繁忙以至于達到瓶頸時，高優(yōu)先級別的業(yè)務獲得了更多的傳輸帶寬，保證了高優(yōu)先級別業(yè)務的服務水準。 圖 Virtual Fabric 網(wǎng)絡設計 在 Virtual Fabric網(wǎng)絡設計中，我們參見圖 ，劃分為 VF0VF5， 6個 Virtual Fabric網(wǎng)絡 ， 以及 edge Fabric 網(wǎng)絡。以下我們分別對這幾個 VF 在實際環(huán)境中的部署作分別闡述。 VF0 路由 區(qū)域劃分 VF0 作為 Base, 相當于 SAN 路由器，不連接任何設備，只負責連接其他 virtual fabric, 并且隔離不同 virtual fabric 間的廣播風暴。 它包含 SAN 導向器中 所有需要交互端口。 VF1 核心 數(shù)據(jù)庫 區(qū)域劃分 本期計劃為 VF1 核心 數(shù)據(jù)庫 區(qū)劃分 1 個端口板 32 端口 中的 16 端口 ，連接 NMC 數(shù)據(jù)庫 2 臺 SUN E6900、 TDDB \ NPMDB 集群數(shù)據(jù)庫 4 臺 SUN E4900、 XNGDB 1 臺 SUN V890、bpmapp01， 1 臺 SUN V4800、 TeMIP 4 臺 HP 服務器集群。連接主機見下表： 核心生產(chǎn)主機表： Solaris+Veritas LVM E6901/E6902 SUN E6900 NMC 數(shù)據(jù)庫 (ORACLE 9i RAC) 有表可見總共大約 11 臺服務器占用 11 個端口 (包括 TeMIP HP 主機 Npart)。 VF1 還具備 5 端口的擴展能力，在近期內(nèi)能夠充分滿足用戶對核心數(shù)據(jù)庫 區(qū)的擴展需求。 VF2 OA 財務 區(qū)域劃分 VF2 區(qū)劃分系統(tǒng)為 OA 以及財務，劃分 1 塊 32 端口 板 中的 24 端口 ，連接主機見下表 。 OA 系統(tǒng)主機表： Solaris E4901(sun cluster) SUN E4900 TDDB(ORACLE 9i HA) E4902(sun cluster) SUN E4900 NPMDB(ORACLE 9i HA) E4901(sun cluster) SUN E4900 TDDB(ORACLE 9i HA) E4902(sun cluster) SUN E4900 NPMDB(ORACLE 9i HA) xngserver SUN V890 XNGDB(ORACLE 10g) HP UX temip1,temip2,temip3,temip4 TeMIP SUN Solaris bpmapp01/bpmdb01 SUN V4800 bpmapp01/bpmdb01 Windows Archive2 HP DL380 OA 檔案系統(tǒng) Archive3/4 HP DL580 OA 檔案系統(tǒng) Archive3/4 HP DL580 OA 檔案系統(tǒng) EPM1/2 HP DL580 EPM Elearning HP DL580 Elearning HP UX UIPORACLE/UIPPORTAL HP RP4440 UIPORACLE/UIPPORTAL OVSA1/OVSA2 HP RP4440 OVSA1/OVSA2 HP UX Archive1 HP RX4640 OA 檔案系統(tǒng) Documentum/MAXIMO1/MAXIMO2 HP RP4440 Documentum/MAXIMO1/MAXIMO2 Windows DocBack1/DocBack2 HP DL580 公文后端 1,2,3,4 OASQL1 HP DL580 OA SQL SERVER Windows DocBack3/DocBack4 HP DL580 公文后端 1,2,3,4 OASQL2 HP DL580 OA SQL SERVER Windows NMC4 IBM X440 SQL SERVER2020 NMC5/NMC6 IBM X440 EXCHANGE NMCA3D9SVR1/NMCA3D9SVR2 EXCHANGE NMCA3D9SVR1/NMCA3D9SVR2 SQL SERVER 2020 (SQL3) 由此表可見大約在 OA 系統(tǒng) 與 財務系統(tǒng)中存在 20 臺左右服務器 需要連接存儲 LUN，占用端口大約 20 個，這樣 VF2 區(qū)內(nèi)共占用端口大約 20 個，剩余 4個左右端口供用戶擴展。 VF3 應用服務 區(qū)域劃分 VF3 區(qū)域為應用服務區(qū)，此區(qū)域劃分 1 塊端口卡中的 32 個端口 中的 24 端口 ，此區(qū)域連接應用服務區(qū)的 3 組刀片機籠 48 臺刀片服務器，由于刀片機籠中配置 SAN 交換機， SAN 導向器可以將刀片機籠中的 SAN 交換機加入到 VF3 區(qū)內(nèi)成為 VF3 區(qū)內(nèi)的一部分，因此不需要為其配置過多的端口，每臺 機籠內(nèi) SAN 交換機可通過 8 條 8GB 光纖通過 ISL 協(xié)議連接到 SAN導向器中的 VF3 區(qū)內(nèi)，自動實現(xiàn)鏈路聚合。（如需要實現(xiàn)負載均衡則需要添加 Trunking License）。 3 組機籠占用 VF3 24 個端口，每組機籠可具備 64Gb 帶寬，每臺服務器 4Gb 帶寬，如果每臺刀片服務器虛擬 5 臺虛機則每臺虛機可分配 80MB 帶寬，基本滿足業(yè)務需要。 VF3中共占用大約 24 端口， 目前沒有擴展能力，但可通過增加端口板或者添加邊緣交換機擴展VF3。如果刀片機籠沒有配置 SAN 交換機，則需要利舊原有的 3 臺 32 端口交換機，刀片服務器連接 32 口 Brocade 4100B 交換機，在通過 4100B 中 8 條 4GB 光纖通過 ISL 協(xié)議連接到 SAN導向器中的連接到 VF3 中。 在 VF3 中大量應用服務器以虛擬機的形式存在 ，因此要求涉及連接的所有交換機都支持 NPIV 的劃分方式。 在虛擬機不存在大數(shù)據(jù)量時采用傳統(tǒng)的 LUN 映射、Zone 劃分方式將 LUN 分配給 EXSserver， EXSserver 將虛擬機的映像文件 VMDK 存儲在 LUN中。當虛擬機需要的存儲空間大于 75GB 時，建議直接將 LUN 映射給虛擬機采用 LDM 的方式，利用交換機 NPIV 技術使虛擬端口和 LUN 仍然實現(xiàn)單個啟 動程序分區(qū) SIZ 的方式。 VF4 備份資源 區(qū)域劃分 VF4 區(qū)為備份區(qū)，此區(qū)域內(nèi)劃分 2 臺備份服務器， 1臺 VTL 虛擬帶庫設備，以及 1 臺利舊 8 驅動器的 HP EML245E 磁帶庫，其中備份服務器每臺需占用 1 個 FC 端口， EML245 可以將 8 個驅動器分別連接到 2 臺 SAN 導向器中的 VF4 區(qū)中，因此每臺 SAN 導向器占用 4 端口，機械手占用 1 端口，虛擬帶庫按每交換機 4 端口計算，則備份區(qū) VF4 區(qū)內(nèi)占用大約 11 端口。 VF1VF3 生產(chǎn)環(huán)境的 Virtual Fabric 通過 VF0 Base Virtual Fabric Rounting 功能與備份區(qū)互通，設置交換機的 LSAN，將相關的設備分配到相應的 LSAN Zone 中。 以 Brocade 交換機為例， 執(zhí)行以下命令： zonecreate lsan_stn_w2k_hdsB, stn_w2k。 stn_hdsB。 然后將它們加入到 config 中。 cfgAdd “ config1” , “ lsan_stn_w2k_hdsB。 ??” NMCA3D10SVR1/NMCA3D10SVR2 SQL SERVER 2020 OLAP 將生成的 config 激活并保存。 cfgEanble “ config1” VF5 存儲資源區(qū)域劃分 VF5 區(qū)劃分為存儲資源 池， VF5 劃分原則為橫跨所有會與存儲資源池有數(shù)據(jù)交互的 VF計算資源區(qū)所存在的端口板上。保證相關的業(yè)務計算區(qū)主機與存儲資源池中分配的 LUN 影射端口處于同一塊端口板上。 VF1VF3 計算資源區(qū)的 VF 同樣通過 VF0 Base Virtual Fabric Rounting 功能與存儲資源區(qū)互通，設置交換機的 LSAN，將相關的設備分配到相應的 LSAN Zone 中。 本項目中計劃為 VF5 分配端口板 1 中的 16 端口，端口板 2 中的 8 端口，端口板 3中的 8 端口?？偣?32 端口。 在本項目中核心生產(chǎn)區(qū)的存儲設備 DMX3 配置 2 個控制器， 每控制器 8 個前端端口，設計連接到 VF5 區(qū)中的端口卡 1 上 。 TIMP 系統(tǒng)所使用的 EVA4000 磁盤陣列配置 2 個控制器，每控制器 4 個前端端口，設計連接到 VF5 區(qū)中的端口卡 1 上。存儲資源區(qū)占用端口板 1 12端口。新增的 CX4 磁盤陣列建議配置 2 個控制器，每控制器 8 個前端端口，設計連接到 VF5區(qū)中的端口卡 2 和 3 上。為 OA、財務、應用服務系統(tǒng)的服務器提供存儲空間。將占用 2 和 3端口板各 4 個端口。存儲資源區(qū)共占用 20 端口，剩余 12 端口。 以上 Virtual Fabric 的劃分建議僅僅根據(jù)我方對現(xiàn)有設備架構理解制定，在實際實施環(huán)境中可以按照 Virtual Fabric 網(wǎng)絡中端口擴展靈活性，動態(tài)的添加端口?？梢园凑宅F(xiàn)有實際端口使用數(shù)量劃分每一個 VF 的端口數(shù)量，剩余端口可以在今后的擴展中按需求隨用隨加。 Edge Fabric 區(qū)域劃分 Edge Fabric區(qū)域主