【正文】 備份數(shù)據(jù)分級將按照時間順序?qū)⒔趦?nèi)的數(shù)據(jù)備份到能夠快速恢復的 VTL 設(shè)備上，將時間較長的歷史備份數(shù)據(jù)遷移到磁帶庫上以節(jié)省 虛擬帶庫的空間及能耗。 其中數(shù)據(jù)重要等級將按照數(shù)據(jù)在遼寧移動網(wǎng)管 OA 系統(tǒng)中的重要程度劃分，存儲在不同級別的存儲設(shè)備上。要快速分配容量，用戶只需選擇 一個池，然后選擇主機并指定要分配的虛擬容量即可。 圖 應用服務區(qū)，以及 OA 系統(tǒng)等可以通過存儲系統(tǒng)的 Virtual Provisioning 預供應功能實現(xiàn)。它可以不受存儲品牌的限制跨平臺存儲數(shù)據(jù)，為今后實現(xiàn)卷級的在線數(shù)據(jù)擴容、數(shù)據(jù)鏡像、快照保護以及容災打下堅實的基礎(chǔ)。 目前實現(xiàn)存儲虛擬化的手段有 2 種。目前遼寧移動基本實現(xiàn)了存儲集中化，核心業(yè)務系統(tǒng)存儲在高端的 DMX 系統(tǒng)上， OA、財務等系統(tǒng)存儲在中端存儲設(shè)備上。數(shù)據(jù)通過VF 之間的 routing 功能將數(shù)據(jù)備份到備份資源池中。 這些系統(tǒng)分別為計算資源池提供不同需求的存儲空間與備份空間。邏輯層面 依賴于物理層面 主要包括存儲資 源池創(chuàng)建、存儲虛擬化 等方面。 除了采用數(shù)據(jù)備份的物理保護機制，存儲資源池應具備快照、鏡像等邏輯保護機制以便在發(fā)生邏輯錯誤時快速恢復。 釋放 DMX 主存儲上的空間，使其更好的為核心數(shù)據(jù)庫系統(tǒng)服務。在遼寧移動 GEDC 綠色數(shù)據(jù)中心數(shù)據(jù)不斷增大的環(huán)境下速度，明顯不足。 沒有采用數(shù)據(jù)分級存儲，在主存儲上存儲太多的歷史數(shù)據(jù)，從而導致空間不足 。缺點是需要為其多分配卡、交換機資源，并且線纜連接走向設(shè)計需要重新部署。按照 SAN網(wǎng)絡(luò)連接架構(gòu)將 iSCSI存儲設(shè)備與主機連接在以太網(wǎng)交換機上 。部署的架構(gòu)可分為兩種： 利用現(xiàn)有生產(chǎn)網(wǎng)絡(luò)。 圖 iSCSI網(wǎng)絡(luò)設(shè)計 目前 隨著以太網(wǎng)絡(luò)的發(fā)展， iSCSI網(wǎng)絡(luò)在越來越多地運用到用戶的實際生產(chǎn)環(huán)境 ，其最大的優(yōu)勢就是部署簡單，可以與現(xiàn)有以太網(wǎng)環(huán)境結(jié)合?？梢酝ㄟ^ Traffic isolation 功能為特定業(yè)務主機指定特定的傳輸路徑而無須和其他業(yè)務共享傳輸通道，而保證業(yè)務核心業(yè)務的更高服務水準。 主要功能如下： ? 自動發(fā)現(xiàn)所有可管理設(shè)備，包括 SAN 設(shè)備，主機及存儲設(shè)備，并且進行視圖化，并動態(tài)顯示各設(shè)備之間連接的流量； ? 以不同的詳細程度主動監(jiān)控關(guān)鍵架構(gòu)運行狀態(tài)信息； ? 為在物理和虛擬服務器上運行的應用配置服務質(zhì)量 （ QoS） 優(yōu)先級 ， 優(yōu)化高優(yōu)先級應用的性能 ? 實時收集并顯示性能統(tǒng)計數(shù)據(jù) ， 顯示歷史視圖來實現(xiàn)主動故障檢測； ? 通過先進的克隆功能幫助企業(yè)捕獲、備份并對比交換機配置文件； ? 完成自動數(shù)據(jù)收集 ， 觸發(fā) Call Home通知功能 ， 簡化故障隔離、診斷和遠程支持； ? 利用實時日志、診斷 和故障隔離功能來提供主動預警 ， 在故障影響到服務水平協(xié)議之前予以排除； 要求管理優(yōu)化平臺提供數(shù)據(jù)流控制機制，實現(xiàn) I/O 流量的控制管理： a. Ingress Rate Limiting: 可以限定設(shè)備連入交換機的端口流量，當某個業(yè)務主機端口流量過大影響其他業(yè)務主機的運行時，可以使用這個功能來限定這個設(shè)備端口的流量，從而達到保證其他業(yè)務系統(tǒng)正常運行的目的。 以混南數(shù)據(jù)中心作為沈北數(shù)據(jù)中心的同城容災中心，在北京搭建異地容災中心為例： 建議 每臺 SAN 導向器 配置四個 FCIP 端口，分別連接 混南 備份中心兩臺核心骨干路由器的千兆以太網(wǎng)端口，每臺路由器各連一條 ATM 線路到北京， 路由器采用 當今最高端的企業(yè)級骨干路由器，高速處理能力，全容錯配置，無任何單點故障。 DWDM設(shè)備部署雙環(huán)路設(shè)計，同步不同的電信運營商提供鏈路冗余。 1. 如果適當，為適當?shù)木嚯x配置 Brocade Extended Fabrics. 2. 在長距離 E_Ports上設(shè)置 FC端口速度 . 下面的例子展示了 FC端口是怎樣被設(shè)置成在通過 CWDM設(shè)備上傳遞 75km距離，并達到 4 Gbit/sec的比特率： Switch portCfgLongDistance 1/0 LS 1 75 Switch portCfgSpeed 1/0 4 線路冗余 許多距離延展設(shè)備都能提供一些選擇用于保持容錯和跨光網(wǎng)傳播時的 ISL的可用性。 DWDM設(shè)備一般能配置用來提供一種路徑保護方案以免鏈路失敗或是用在一個同樣能提供保護的環(huán)路拓撲當中。如果適當，為適當?shù)木嚯x配置 Brocade Extended 的 1/0端口是怎樣配置作為 LS Extended Fabrics模式和支持 100km遠的： Switch portCfgLongDistance 1/0 LS 1 100 密集波分復用 (DWDM) 常用于要求高速大容量的網(wǎng)絡(luò)及遠距離傳輸。另外，一項更廣泛的部件挑選已經(jīng)通過 Brocade Data Centre Ready Program被認證。 暗光纖通常是指已經(jīng)鋪好但未被使用的光纖線，對于遠距離延展 SANs是最簡單但并不是最節(jié)省成本或可擴展的方法。而最近的單模光纖類型 非零色散位移光纖 (NZDSF)，在新的部署環(huán)境中則解決了之前 2類光纖的所面臨的問題。 下表列出了不同類型光纖的可操作距離。 光纖 線路 有兩種基本類型的光纖線：多模光纖 (MMF)和單模光纖 (SMF)。 ? 最高級別：要求最苛 刻，要求最短的 RTO和最小的 RPO，需要在兩站點或應用集群間做高速同步或近同步的復制以便于服務在災難發(fā)生后能立即恢復。 業(yè)務連續(xù)性解決方案 跨地域延伸存儲網(wǎng)絡(luò)的最通常的理由是為了萬一發(fā)生本地災難時保護關(guān)鍵業(yè)務數(shù)據(jù) 1并提供對應用于服務的近連續(xù)性的訪問。 其優(yōu)勢是可以將現(xiàn)有的 SAN 網(wǎng)絡(luò)擴展，在一個 Fabric 網(wǎng)絡(luò)中最多可以連接 239 臺交換機，最大跳數(shù)為 7 跳。 Fabric Channel Routing 主要用于連接多個 SAN 孤島，可以做到不 需要更改接入交換機的 DomainID 與 Zoning 配置， SAN 網(wǎng)絡(luò)間相對獨立。一種是采用 ISL 協(xié)議在現(xiàn)有 SAN 網(wǎng)絡(luò)中擴展端口。 在擴展 DCX 中創(chuàng)建 VF，然后將相應得 VF 通過創(chuàng)建 ISL 協(xié)議與主 DCX 中的 VF 連通，通過 LSAN 配置使其相應端口互通。 當 2 臺 DCX 距離大約 10 公里的長距離連接需要激活 Brocade Extended Fabric 功能，采用 eXtended ISL 協(xié)議連接。 將 Core 板中的核心互聯(lián)端口 ICL 配置為 Base Switch， FID 為 1， 將 ICL 協(xié)議分配給前端互聯(lián)端口 。如下圖所示： 圖 2 臺 DCX 串接后 ，通過 Virtual Fabric 互通。 圖 導向器串接擴展 導向器串接擴展是在用戶的業(yè)務系統(tǒng)在短期內(nèi)急速擴展， 1 臺數(shù)百端口的導向器也不能滿足其 SAN 網(wǎng)絡(luò)擴展的要求時使用。本次項目中采購的導向器端口為 128 端口， 4 塊 32口端口板，還應剩余 4 個左右的端口板，可以擴展為 32 端口或者 48 端口從而達到 128 或者192 端口的擴展能力。 SAN 網(wǎng)絡(luò)的擴展方式基于其擴展環(huán)境的不同可以通過多種手段實現(xiàn)。使 VF VF VF3 中的 EMC 存儲設(shè)備可以與測試區(qū)的存儲 HP EVA4000 互通，這樣可以利用 Open Replicater 與 SANcopy 功能將數(shù) 據(jù)發(fā)送到測試區(qū)陣列進行測試。由于安全管理區(qū)內(nèi)服務器與存儲設(shè)備數(shù)量不多，這部分空余的交換機端口可作為近期內(nèi)新增的其他系統(tǒng)使用。 由于本期 SAN 導向器配置 128 端口，通過以上劃分的 6 個 VFabric 剩余 16 個端口， 如果采用隨用隨加的方式， SAN 導向器大約剩余 3040 端口，但建議這些端口為系統(tǒng)升級保留。存儲資源區(qū)共占用 20 端口，剩余 12 端口。存儲資源區(qū)占用端口板 1 12端口。 本項目中計劃為 VF5 分配端口板 1 中的 16 端口，端口板 2 中的 8 端口，端口板 3中的 8 端口。 ??” NMCA3D10SVR1/NMCA3D10SVR2 SQL SERVER 2020 OLAP 將生成的 config 激活并保存。 以 Brocade 交換機為例， 執(zhí)行以下命令： zonecreate lsan_stn_w2k_hdsB, stn_w2k。 在虛擬機不存在大數(shù)據(jù)量時采用傳統(tǒng)的 LUN 映射、Zone 劃分方式將 LUN 分配給 EXSserver， EXSserver 將虛擬機的映像文件 VMDK 存儲在 LUN中。 3 組機籠占用 VF3 24 個端口，每組機籠可具備 64Gb 帶寬，每臺服務器 4Gb 帶寬，如果每臺刀片服務器虛擬 5 臺虛機則每臺虛機可分配 80MB 帶寬，基本滿足業(yè)務需要。 VF2 OA 財務 區(qū)域劃分 VF2 區(qū)劃分系統(tǒng)為 OA 以及財務，劃分 1 塊 32 端口 板 中的 24 端口 ，連接主機見下表 。 它包含 SAN 導向器中 所有需要交互端口。有了這些數(shù)據(jù)流控制機制，客戶可以很好的分配和利用帶 寬資源，為應用程序服務，例如 虛擬機 SQL 數(shù)據(jù)庫 為 核心業(yè)務，劃分為高優(yōu)先級，而 文件歸檔等 則為低優(yōu)先級應用，這樣，在業(yè)務流量最繁忙以至于達到瓶頸時，高優(yōu)先級別的業(yè)務獲得了更多的傳輸帶寬，保證了高優(yōu)先級別業(yè)務的服務水準。再通過Zone 分區(qū)的方式將多個 NPIV 邏輯上分離，保證單一主機到單一存儲 LUN 的訪問。如果這個設(shè)備不能處理這種異常的 PLOGI 信號， 就應該使用 WWNbased zoning。 每個 NPIV 設(shè)備有獨立的 device PID,Port WWN, 和 Node WWN，執(zhí)行同 Fabric 中其他端口相同的功能。 SAN 網(wǎng)絡(luò) NPIV 設(shè)計 N_Port ID Virtualization (NPIV) 將單個光纖端口虛擬成多個獨立的端口，為每個連接到該物理端口的不同類型操作系統(tǒng)提供獨立的端口標識（對每個操 作系統(tǒng)看起來就像有自己獨立的物理端口一樣）。 保證每個生產(chǎn)區(qū) VF 的主機可以與備份區(qū) VF4 的 VTL 和物理帶庫互通，以實現(xiàn) LANFree備份。 SAN 網(wǎng)絡(luò)路由設(shè)計 由于本期項目的 SAN 網(wǎng)絡(luò)過于龐大，無法在一個 Fabric 中實現(xiàn)所有 計算、存儲、備份設(shè)備的互聯(lián)，因此需要對 SAN 架構(gòu)劃分 多個 Virtual Fabric 的方式將不相關(guān)的 SAN 區(qū)域分開， 每個 virtual fabric 相當于一臺獨立的交換機，互相沒有聯(lián)系，將不 同的設(shè)備連接到不同 virtual fabric 上即加入了相應的 virtual fabric。 SIZ是最佳的，因為它可以阻止任何主機到主機的互動和限制 RSCNs只到在RSCN內(nèi)包含所需信息的正確區(qū)域。在大多數(shù)情況下，所有這些方法推薦給上文所述的原因。 對某一分區(qū)配置有很多方法可以把 SAN主機和存儲節(jié)點分組。內(nèi)置于存儲和主機接口的 pWWN識別使用全局唯一標識符，對于所有 fabric，唯一的識別方法是獨一無二的 pWWN。 雖然 LUN masking可專門用于映射 LUNs到主機， 但是在 fabric中會使每個主機暴露在每個危及穩(wěn)定的 RSCN上。對于大多數(shù)存儲陣列來說，該存儲空間的單位是邏輯單元號（ LUN ），多個 LUNs被映射到陣列的光纖通道（ FC ）端口上。分區(qū)造成一種只有當他們的成員，在同一區(qū)域時節(jié)點可以互相溝通的情形。 利舊的邊緣交換機上同樣將部署業(yè)務相關(guān) 的主機與存儲設(shè)備。 在本期的 SAN網(wǎng)絡(luò)設(shè)計中相關(guān)聯(lián)的主機與存儲設(shè)備都 將 處于 SAN導向器中 同一塊端口卡中，確保生產(chǎn)數(shù)據(jù)實現(xiàn)本地內(nèi)部交換，在 SAN 導向器端口卡內(nèi)部可以實現(xiàn) 1:1 的全雙工超載。 為了最大限度的確保性能，在 SAN 網(wǎng)絡(luò)設(shè)計中還有一個很重要的原則 — 本地化設(shè)計。 圖 SAN 網(wǎng)絡(luò)連接原則 交換機本身的設(shè)計有很多考慮的因素，為了確保很好的性能，在大型的 SAN 交換機設(shè)計上都要評估其超載比。 其優(yōu)勢是可以將現(xiàn)有的 SAN 網(wǎng)絡(luò)擴展 ，在一個 Fabric 網(wǎng)絡(luò)中最多可以連接 239 臺交換機，最大跳數(shù)為 7跳。 圖 當 Edge Fabric 與 Core Fabric 存在大數(shù)據(jù)量交互時 ISL 協(xié)議與 Trunking 功能加大帶寬，實現(xiàn)鏈路的負載均衡與故障切換。 Back Bone to Edge Routing 第一種方式叫做 Back Bone to Edge Routing，其最大的優(yōu)勢是不需要更改接入交換機的 DomainID 與 Zoning 配置，而且 SAN 網(wǎng)絡(luò)間邏輯隔離，當一個 SAN 網(wǎng)絡(luò)中發(fā)生故障時不會影響其他 SAN 網(wǎng)絡(luò)。 單 臂 SAN環(huán)境拓撲圖： 圖 SAN 網(wǎng)絡(luò)分級架構(gòu) 設(shè)計 在本期 GEDC 項目中的 SAN 架構(gòu)采用物理 與邏輯 分級設(shè)計 ，物理分級即在 SAN 網(wǎng)絡(luò)架構(gòu)中采用 Coreedge 核心 邊緣 的方式，采用 SAN 導向器作為核心交換機，其他利舊或者新購的小型 SAN 交換機串接在它上面，使 SAN 網(wǎng)絡(luò)擴展 延伸 下去。 VF5 為生產(chǎn)存儲區(qū)，將所有在線業(yè)務存儲系統(tǒng)連接到這個區(qū)域，如果需要這個區(qū)域的端口將分布在所有端口板上。 SAN導向器應具備路由功能，可以在不中斷業(yè)務，不更改交換機 Domain ID 和 Zoning 配置的情況下將多個 SAN 孤島連接在一起，并通過 LSAN 的方式使其之間能夠按