【正文】 fabric又通過base與備份區(qū)VF4連通，共享備份區(qū)內(nèi)的備份設(shè)備，備份區(qū)內(nèi)連接備份服務(wù)器、VTL虛擬帶庫以及PTL物理帶庫。在本次項目中使用中高端存儲、交換、備份設(shè)備，%。以上現(xiàn)狀表明遼寧移動網(wǎng)管系統(tǒng)的SAN網(wǎng)絡(luò)現(xiàn)狀目前面臨著幾個待解決問題：端口不足，目前剩余34端口，無法滿足今后GEDC項目中大量新增業(yè)務(wù)系統(tǒng)的接入需求。對于SAN, 這就意味著進(jìn)行前所未有的大規(guī)模整合，并通過存儲及網(wǎng)絡(luò)虛擬化方面的改進(jìn)提高可管理性。交換設(shè)備過多而沒有統(tǒng)一的管理，為管理者帶來管理效率問題。ID物理分級在SAN網(wǎng)絡(luò)中也分為2種架構(gòu)：一種為通過Routing的方式將小型SAN網(wǎng)絡(luò)串接在SAN導(dǎo)向器上，另一種方式通過ISL擴(kuò)展的方式將小型SAN網(wǎng)絡(luò)融入核心交換機(jī)中的某一個VF中。所謂超載比，就是每個交換機(jī)的對外部端口和對內(nèi)端口的比值。當(dāng)你在一個SAN使用分區(qū)時，節(jié)點可以是多個區(qū)域的成員，這體現(xiàn)了很大的靈活性。區(qū)域成員首先有基于一個主機(jī)訪問存儲端口的需要。確保開發(fā)測試區(qū)的主機(jī)和備份區(qū)VF4的VTL和物理帶庫互通，以實現(xiàn)將歷史數(shù)據(jù)恢復(fù)到開發(fā)測試區(qū)用于測試研發(fā)。和Node在本期遼寧移動GEDC項目中存在大量刀片服務(wù)器，每臺刀片機(jī)種大約分配5臺左右的虛擬機(jī)。以下我們分別對這幾個VF在實際環(huán)境中的部署作分別闡述。 VF4備份資源區(qū)域劃分VF4區(qū)為備份區(qū)，此區(qū)域內(nèi)劃分2臺備份服務(wù)器，1臺VTL虛擬帶庫設(shè)備，以及1臺利舊8驅(qū)動器的HP EML245E磁帶庫，其中備份服務(wù)器每臺需占用1個FC端口，EML245可以將8個驅(qū)動器分別連接到2臺SAN導(dǎo)向器中的VF4區(qū)中，因此每臺SAN導(dǎo)向器占用4端口，機(jī)械手占用1端口，虛擬帶庫按每交換機(jī)4端口計算，則備份區(qū)VF4區(qū)內(nèi)占用大約11端口。為OA、財務(wù)、應(yīng)用服務(wù)系統(tǒng)的服務(wù)器提供存儲空間。嚴(yán)格符合SAN網(wǎng)絡(luò)路由設(shè)計中所提要求。 根據(jù)VF配置劃分已經(jīng)配置VF1VF4，4個Virtual Fabric，并且將所需要的端口分別分配給每一個VF。在SAN網(wǎng)絡(luò)分級架構(gòu)中我們已經(jīng)詳細(xì)介紹了2種分級架構(gòu)方式Fabric Channel Routing和InterSwitch Link。l 較低級別：對于非關(guān)鍵應(yīng)用的數(shù)據(jù)在災(zāi)難發(fā)生后可以通過磁帶方式進(jìn)行恢復(fù)，RTO最大。Brocade的Extended Fabrics選件的license能提供額外的buffer credits用于長距離E_Ports以保持遠(yuǎn)距離時FC性能。最簡單的保護(hù)形式就是來自于交換機(jī)本身。c. Flow based QoS指定數(shù)據(jù)流傳輸?shù)膬?yōu)先級別,可以將SAN連接線的內(nèi)部劃分成高，中，低三個優(yōu)先級別，高優(yōu)先級獲得最高的帶寬，而低優(yōu)先級別獲得最低的傳輸帶寬。 設(shè)備目前的使用情況如下：存儲概況存儲名廠家類別容量(裸）已用容量(裸）剩余空間DMX3EMC磁盤陣列50TB48TB1TB(RAID0+1)CX500DELL磁盤陣列(RAID0+1),130GB(RAID1),502GB(RAID5)EVA4000HP磁盤陣列1TB1TB0EML245HP磁帶庫100TB87TB13TB從上表看到，現(xiàn)有設(shè)備存儲空間已經(jīng)接近飽和，并且部分設(shè)備比較陳舊。對在線生產(chǎn)系統(tǒng)實施快速的數(shù)據(jù)分級備份。但隨著數(shù)據(jù)中心的發(fā)展以及單臺設(shè)備處理能力的限制，在今后可能還會有更多的存儲設(shè)備加入到存儲資源池，對新增入的設(shè)備如何管理也是現(xiàn)階段GEDC所需要考慮的問題之一。這樣可以為虛擬機(jī)等應(yīng)用系統(tǒng)提供更好卷擴(kuò)展方式。TIMP系統(tǒng)的存儲系統(tǒng)不變，繼續(xù)使用EVA4000。不能形成有效的備份和快速的恢復(fù)?；谝陨戏治鼋ㄗh在GEDC項目中采用基于軟件級別的邏輯虛擬化擴(kuò)展以及Virtual Provisioning擴(kuò)展結(jié)合的方式。 通過這種以上6個步驟可以保證虛擬機(jī)與物理機(jī)所使用的LUN在線動態(tài)擴(kuò)展。因此除了采用RAID技術(shù)對底層磁盤進(jìn)行保護(hù)外，還需要采用鏡像、快照等方式對存儲資源池中的數(shù)據(jù)進(jìn)行實時保護(hù)。 測試區(qū)存儲架構(gòu)設(shè)計測試區(qū)的存儲備份設(shè)備主要為開發(fā)測試環(huán)境提供需求快速響應(yīng)服務(wù)，由于開發(fā)測試區(qū)的規(guī)模要遠(yuǎn)遠(yuǎn)小于生產(chǎn)區(qū)，并且其主要功能是為生產(chǎn)系統(tǒng)提供驗證，測試，開發(fā)的平臺，并不承擔(dān)在線生產(chǎn)數(shù)據(jù)，因此安全級別與性能要求要遠(yuǎn)遠(yuǎn)小于生產(chǎn)區(qū)。測試Virtual Fabric功能測試目的：測試SAN導(dǎo)向器的Virtual Fabric的各項功能測試步驟：a、在SAN導(dǎo)向器中按照VF的設(shè)計劃分多個VF b、在VF之間的互通性與限制性 c、在某個VF中添加端口，測試其擴(kuò)展性 d、將1個下線Swith連接到SAN導(dǎo)向器中的某個VF中，將其端口加入VF，測試VF與其他交換機(jī)的擴(kuò)展能力測試結(jié)果：劃分VF成功，擴(kuò)展成功，否則為不通過。 驗證SAN網(wǎng)絡(luò)的擴(kuò)展能力，測試新購導(dǎo)向器與原有交換機(jī)的集連能力。因此建議用戶針對不同的數(shù)據(jù)可以分別采用保護(hù)機(jī)制。因此通過以上5個步驟可以實現(xiàn)標(biāo)書中在2小時內(nèi)實現(xiàn)完成用戶提出的存儲需求的要求。創(chuàng)建Storage Group將主機(jī)系統(tǒng)與Thin LUN加入，使其創(chuàng)建連接。但新加入的存儲資源如何動態(tài)的分配擴(kuò)展到原有計算資源中就成為存儲管理員需要注意的地方。釋放的在線存儲空間可以為用戶利用，從而節(jié)省企業(yè)總體擁有成本TCO。所有在線生產(chǎn)數(shù)據(jù)均不建議存儲在低端陣列或者SATA磁盤中，因為其不穩(wěn)定性會為企業(yè)帶來不必要的損失。虛擬資源調(diào)配可簡化并加速調(diào)配過程，提供“適時”的容量分配，并提高利用率。首先需要考慮的為題就是存儲集中化與存儲虛擬化。采用基于信息生命周期管理ILM的技術(shù)，按照數(shù)據(jù)在其生命周期中的不同重要程度分為在線、近線、離線保存。同過后端存儲設(shè)備的LUN劃分、影射，以及主機(jī)系統(tǒng)安裝initiate使主機(jī)識別iSCSI LUN，實現(xiàn)數(shù)據(jù)塊級數(shù)據(jù)訪問。從而保證其他系統(tǒng)的快速訪問。另外涉及FC over dark fiber，因為CWDM和DWDM設(shè)備對協(xié)議和比特率都是透明的，F(xiàn)OS配置同用暗光纖直連交換機(jī)完全一樣。FC SANs能以不同方式在長距離光網(wǎng)絡(luò)上延展。企業(yè)必須對數(shù)據(jù)進(jìn)行分類以便于用來決定各業(yè)務(wù)操作的重要性，備份頻率及發(fā)生故障時的恢復(fù)時間。 SAN邊緣擴(kuò)展SAN邊緣化擴(kuò)展是在現(xiàn)有核心交換機(jī)上通過掛接其他小型交換機(jī)達(dá)到端口擴(kuò)展或者SAN網(wǎng)絡(luò)互通的方式。要求SAN導(dǎo)向器具備足夠的互連帶寬，滿足串接后的兩端業(yè)務(wù)互通訪問。利舊2臺4900B 64口交換機(jī)作為測試區(qū)的核心交換機(jī)通過Rounting功能連接到SAN導(dǎo)向器中。在本項目中核心生產(chǎn)區(qū)的存儲設(shè)備DMX3配置2個控制器，每控制器8個前端端口，設(shè)計連接到VF5區(qū)中的端口卡1上。如果刀片機(jī)籠沒有配置SAN交換機(jī)，則需要利舊原有的3臺32端口交換機(jī)，刀片服務(wù)器連接32口Brocade 4100B交換機(jī)，在通過4100B中8條4GB光纖通過ISL協(xié)議連接到SAN導(dǎo)向器中的連接到VF3中。1同時考慮到虛擬機(jī)內(nèi)各業(yè)務(wù)系統(tǒng)的重要程度不同，應(yīng)可利用交換機(jī)端的數(shù)據(jù)流控制機(jī)制，實現(xiàn)I/O流量的控制管理。是不被block的，相當(dāng)于FLOGI被發(fā)送到NPIV虛擬端口有與N_port相同的屬性，因此能夠提供Fabric相關(guān)的所有服務(wù)。然后通過Routing的方式將多個VF以及edge Fabric連接在一起，共享備份設(shè)備。pWWN識別比D，P識別可以更安全，因為物理上被電纜連接到端口的任何設(shè)備可以不適當(dāng)?shù)販?zhǔn)許存儲存取未經(jīng)授權(quán)的主機(jī)。只有當(dāng)業(yè)務(wù)主機(jī)進(jìn)行LANFree備份時會通過Routing功能跨背板進(jìn)行數(shù)據(jù)傳輸。劣勢是一個SAN網(wǎng)絡(luò)端口過多帶來的管理難度與故障率增高，并且在連接新的SAN交換機(jī)時需要配置其DomainID與Zoning信息不能與核心交換機(jī)沖突。將相關(guān)聯(lián)的業(yè)務(wù)主機(jī)以及與其相關(guān)的存儲設(shè)備端口劃分在同一塊端口卡內(nèi)，VF5中的存儲設(shè)備按需求分別連接到各自業(yè)務(wù)系統(tǒng)的virtual fabric上，實現(xiàn)與業(yè)務(wù)系統(tǒng)的隔離和自治、互通。%的高可用性。光纖交換交換機(jī)概況：光纖交換交換機(jī)提供廠商已使用端口速率DOMAIN ID備注博科64PORTEMC504GB/S1　博科32PORT(up)HP214GB/S3　博科32PORT(down)HP234GB/S2　博科64PORT　04GB/S　新到貨另外還有1臺新到貨Brocade 4900B 64口交換機(jī)總共是2臺64口，2臺32口交換機(jī)。當(dāng)今的數(shù)據(jù)中心SAN可將存儲資源整合并分配給一系列運行著高級應(yīng)用的服務(wù)器。數(shù)據(jù)中心機(jī)房存在單點故障，當(dāng)機(jī)房故障沒有容災(zāi)SAN架構(gòu)接管業(yè)務(wù)。Virtualization）本期項目中會針對于不同系統(tǒng)的不同訪問方式分別采用這兩種分級連接架構(gòu)。當(dāng)然，為了確保性能，最好是具有1:1的超載比，才能確保性能充分發(fā)揮。 分區(qū)不僅阻止主機(jī)免受未授權(quán)的存儲資產(chǎn)訪問，而且可以停止不受歡迎的主機(jī)到主機(jī)的通信和全fabric的注冊狀態(tài)變更通知（ RSCN ）的中斷 。主機(jī)彼此之間很少需要直接互動，且存儲端口由于其作為目標(biāo)的本性從未發(fā)起SAN交通。必要時各個生產(chǎn)區(qū)的存儲可以與開發(fā)測試區(qū)的存儲互通，將數(shù)據(jù)由存儲設(shè)備直接推送到開發(fā)測試區(qū)存儲上，用于測試。WWN，執(zhí)行同F(xiàn)abric中其他端口相同的功能。當(dāng)這些虛擬機(jī)需要連接存儲資源池中的LUN時，需要通過虛擬機(jī)的虛擬端口影射到刀片機(jī)籠的內(nèi)聯(lián)FC端口，再通過外聯(lián)FC端口連接到SAN導(dǎo)向器上識別存儲資源池中的LUN。 VF0路由區(qū)域劃分VF0作為Base, 相當(dāng)于SAN路由器，不連接任何設(shè)備，只負(fù)責(zé)連接其他virtual fabric, 并且隔離不同virtual fabric間的廣播風(fēng)暴。VF1VF3生產(chǎn)環(huán)境的Virtual Fabric通過VF0 Base Virtual Fabric Rounting功能與備份區(qū)互通，設(shè)置交換機(jī)的LSAN，將相關(guān)的設(shè)備分配到相應(yīng)的LSAN Zone中。將占用2和3端口板各4個端口。 SAN網(wǎng)絡(luò)擴(kuò)展設(shè)計 為了保證在今后的業(yè)務(wù)發(fā)展GEDC數(shù)據(jù)中心要求SAN網(wǎng)絡(luò)可以實現(xiàn)基本無限制的擴(kuò)展延伸，以達(dá)到更多服務(wù)器與存儲設(shè)備的接入，適應(yīng)GEDC機(jī)房的健康成長與快速部署。分配好的端口將從Default Switch中移出。這2種方式同樣構(gòu)成SAN邊緣擴(kuò)展方式。l 其他的一些技術(shù)如持續(xù)數(shù)據(jù)保護(hù)(CDP)能被用于適當(dāng)?shù)腞PO及RTO的場景。Brocade及其合作伙伴對于不同距離，已列出全部測試過合格的光收發(fā)器。多個ISLs通過網(wǎng)絡(luò)互聯(lián)以提供額外的帶寬和冗余以防交換機(jī)上或距離延展設(shè)備上的端口失效。有了這些數(shù)據(jù)流控制機(jī)制，客戶可以很好的分配和利用帶寬資源，為應(yīng)用程序服務(wù)，例如核心數(shù)據(jù)庫應(yīng)用為最核心業(yè)務(wù)，劃分為高優(yōu)先級，而OA、郵件則為低優(yōu)先級應(yīng)用，這樣，在業(yè)務(wù)流量最繁忙以至于達(dá)到瓶頸時，高優(yōu)先級別的業(yè)務(wù)獲得了更多的傳輸帶寬，保證了高優(yōu)先級別業(yè)務(wù)的服務(wù)水準(zhǔn)。因此遼寧移動已經(jīng)針對此狀況申請購買了如下存儲備份設(shè)備：設(shè)備類型數(shù)量容量中端存儲170TB虛擬帶庫1　DMX3磁盤76從現(xiàn)狀中我們不難發(fā)現(xiàn)，遼寧移動網(wǎng)管系統(tǒng)的存儲設(shè)備比較全面，但所面臨的最大問題就是資源不足，導(dǎo)致資源不足的原因有幾種：數(shù)據(jù)增長過快。4．存儲資源池架構(gòu)方案設(shè)計 存儲資源池基礎(chǔ)架構(gòu)存儲資源池的基礎(chǔ)架構(gòu)可以分為物理與邏輯兩個層面，在物理層面主要包括設(shè)備的選型、連接、硬件分級架構(gòu)搭建等方面。對存儲資源池中眾多的設(shè)備管理最好的手段就是存儲虛擬化。 存儲資源池分級設(shè)計在存儲資源池的分級設(shè)計中我們將其按照數(shù)據(jù)重要等級、信息生命周期變化和備份數(shù)據(jù)分級變化的3種方式進(jìn)行存儲資源架構(gòu)的劃分。隨著時間的推移數(shù)據(jù)中心中的數(shù)據(jù)會快速增加，數(shù)據(jù)的價值也會由高到低發(fā)生變化。而我們作備份的目的就是要在發(fā)生故障后以最快的速度進(jìn)行數(shù)據(jù)恢復(fù)。 Volume Manager擴(kuò)展采用卷管理軟件達(dá)到存儲資源池的動態(tài)擴(kuò)展是最為簡便統(tǒng)一的方法，它可以支持不同的底層硬件平臺，不同存儲架構(gòu)的LUN由Volume Manager統(tǒng)一管理，采用不同的條帶化技術(shù)進(jìn)行整合，保護(hù)。 存儲資源快速部署設(shè)計存儲資源的快速部署是現(xiàn)代綠色數(shù)據(jù)中心的重要功能，如何能在最短的時間為新加入的業(yè)務(wù)系統(tǒng)分配存出空間需要管理員詳細(xì)的設(shè)計?？煺占夹g(shù)主要應(yīng)用于數(shù)據(jù)邏輯層面的保護(hù)，通過保存在存儲設(shè)備中的變化數(shù)據(jù)的引用標(biāo)記或指針的方式對數(shù)據(jù)進(jìn)行快照保護(hù)，可以在秒級備份或者恢復(fù)數(shù)TB的數(shù)據(jù)。在SAN架構(gòu)設(shè)計中我們把開發(fā)測試區(qū)作為SAN網(wǎng)絡(luò)架構(gòu)中的Edge Fabric區(qū)，采用2臺64口 4GB交換機(jī)連接到Core Fabric區(qū)，通過路由策略僅僅允許開發(fā)測試區(qū)的主機(jī)與備份區(qū)VF4中的備份設(shè)備相通。測試SAN網(wǎng)絡(luò)NPIV功能測試目的：測試SAN導(dǎo)向器與交換機(jī)的NPIV功能測試步驟：a、將刀片服務(wù)器的SAN交換機(jī)連接到SAN導(dǎo)向器 b、通過SAN導(dǎo)向器設(shè)置端口的NPIV c、測試一個端口的NPIV最大數(shù)量與性能 d、測試NPIV端口之間、NPIV端口與物理端口之間的安全劃分Zone。 驗證SAN網(wǎng)絡(luò)NPIV能力，測試單個物理端口的NPIV數(shù)量與性能。而存儲設(shè)備自身的鏡像軟件只能采用同系列的產(chǎn)品之間鏡像，產(chǎn)品選擇受限，并且寫入的數(shù)據(jù)采用串行寫入，影響性能。目前的主流存儲設(shè)備基本都支持此功能，如EMC CX4系列產(chǎn)品。通過創(chuàng)建的Thin pool創(chuàng)建Thin LUN，分配實際物理空間并虛擬化邏輯空間。 存儲資源動態(tài)擴(kuò)展設(shè)計 存儲資源池是基于SAN架構(gòu)搭建，在本項目中存在VF5虛擬分區(qū)中，資源池的擴(kuò)展需要在SAN網(wǎng)絡(luò)擴(kuò)展的基礎(chǔ)上實現(xiàn)，當(dāng)隨著存儲設(shè)備的增多，連入計算資源池的增加，VF5也可以動態(tài)的擴(kuò)展下去，新增的存儲設(shè)備可以無縫的添加到資源池中。這是通過在主存儲