【正文】 大學(xué)數(shù)據(jù)中心建設(shè)項目技術(shù)建議書大學(xué)數(shù)據(jù)中心建設(shè)項目技術(shù)建議書目錄1 數(shù)據(jù)中心總體架構(gòu) 32 優(yōu)勢技術(shù)簡介 5 IRF2虛擬化技術(shù) 5 EVB技術(shù) 8 FCoE技術(shù) 133 業(yè)務(wù)系統(tǒng)部署 17 一般性業(yè)務(wù)系統(tǒng)部署建議 17 核心業(yè)務(wù)系統(tǒng)部署建議 17 數(shù)據(jù)庫系統(tǒng)部署建議 18 網(wǎng)站及郵件業(yè)務(wù)系統(tǒng)部署建議 18 高并發(fā)業(yè)務(wù)系統(tǒng)部署建議 194 項目管理計劃 20 項目組結(jié)構(gòu)圖 20 項目組職責(zé) 20 項目團(tuán)隊成員 22 領(lǐng)導(dǎo)小組 22 項目管理團(tuán)隊 22 項目實施人員 23 項目進(jìn)度計劃 23 項目里程碑 23 項目進(jìn)度管理 23 項目實施流程 24 流程圖 24 項目啟動 24 工程準(zhǔn)備 25 生產(chǎn)備貨 25 環(huán)境準(zhǔn)備 25 工程實施 26 到貨驗收 26 安裝調(diào)試 27 初驗 27 試運行 28 終驗 281 數(shù)據(jù)中心總體架構(gòu)如上圖所示，為項目全景圖。本次某大學(xué)數(shù)據(jù)中心項目。數(shù)據(jù)中心一期將建成學(xué)校新的云計算數(shù)據(jù)中心。包括存儲資源，計算資源及網(wǎng)絡(luò)資源。網(wǎng)絡(luò)資源，數(shù)據(jù)中心采用兩臺H3C S12500X核心交換機(jī)，通過IRF2虛擬化技術(shù)將兩臺核心交換機(jī)虛擬為一臺，每臺配置一塊48端口萬兆/千兆以太網(wǎng)光接口單板，其中12個端口通過光模塊切換為千兆以太網(wǎng)光接口，配置冗余主控模塊，6塊交換網(wǎng)板，實現(xiàn)5+1冗余的同時，提供所有槽位萬兆端口線速轉(zhuǎn)發(fā)，其中一臺核心交換機(jī)配置一塊48端口千兆以太網(wǎng)電接口單板。配置兩臺H3C S5800V2數(shù)據(jù)中心接入交換機(jī)，通過IRF2虛擬化技術(shù)將兩臺核心交換機(jī)虛擬為一臺，包括48端口千兆/萬兆以太網(wǎng)光接口，4個40G QSFP以太網(wǎng)光接口，用于連接刀片服務(wù)器及存儲。數(shù)據(jù)中心接入交換機(jī)的端口具備有多重協(xié)議屬性，端口可以支持IP協(xié)議，F(xiàn)C協(xié)議，F(xiàn)CoE協(xié)議。計算資源包括4臺UIS8000刀片服務(wù)器，共配置48臺兩路刀片服務(wù)器和8臺4路刀片服務(wù)器。每個UIS8000刀片服務(wù)器機(jī)箱配置有兩塊冗余的網(wǎng)絡(luò)模塊，可以為每一個刀片服務(wù)器提供10G的上行鏈路帶寬。每臺UIS8000刀片服務(wù)器通過萬兆以太網(wǎng)光接口上聯(lián)到接入交換機(jī)。通過FCoE技術(shù)進(jìn)行存儲業(yè)務(wù)的交換，通過以太網(wǎng)技術(shù)進(jìn)行數(shù)據(jù)業(yè)務(wù)的交換。通過融合數(shù)據(jù)中心的組網(wǎng)方案，網(wǎng)絡(luò)接入模塊連接接入交換機(jī)承擔(dān)數(shù)據(jù)業(yè)務(wù)的轉(zhuǎn)發(fā)和存儲業(yè)務(wù)的轉(zhuǎn)發(fā)。網(wǎng)絡(luò)連接方式方面，接入交換機(jī)通過跨設(shè)備的鏈路聚合上聯(lián)到核心交換機(jī)，在任何一個核心交換機(jī)出現(xiàn)問題或者是接口單板出現(xiàn)問題時，業(yè)務(wù)不會受到任何的影響。同樣，刀片服務(wù)器也通過跨設(shè)備的鏈路聚合方式連接到接入交換機(jī)，當(dāng)任何一臺接入交換機(jī)出現(xiàn)問題的時候，業(yè)務(wù)也不會受到影響。H3C S5800V2數(shù)據(jù)中心接入交換機(jī)支持EVB協(xié)議，可以將虛擬機(jī)的流量引導(dǎo)至物理交換機(jī)，每一個虛擬機(jī)通過EVB協(xié)議都會在物理交換機(jī)上擁有一個虛擬通道，基于該虛擬通道可以為每一個虛擬機(jī)部署各自的網(wǎng)絡(luò)策略，同時能夠觀察到虛擬機(jī)的獨立流量。通過EVB技術(shù)，可以大大提高對虛擬機(jī)的精細(xì)化管理程度。2 優(yōu)勢技術(shù)簡介 IRF2虛擬化技術(shù)傳統(tǒng)數(shù)據(jù)中心實踐通用的是環(huán)路接入拓?fù)淠Ｊ?，以多生成樹協(xié)議MSTP配合VRRP提供服務(wù)器接入的可靠性，同時，服務(wù)器又以多網(wǎng)卡連接網(wǎng)絡(luò)進(jìn)一步提供冗余能力。但從網(wǎng)絡(luò)拓?fù)涞脑O(shè)計、環(huán)路規(guī)避、冗余備份等角度考慮，其設(shè)計過程還是極其復(fù)雜的，如VLAN的規(guī)劃、生成樹實例的拓?fù)渥枞⒕W(wǎng)關(guān)冗余選擇，包括相應(yīng)技術(shù)參數(shù)的選擇、配置，故障切換的預(yù)期判斷等，都需要一套十分詳細(xì)的流程。而后期在網(wǎng)絡(luò)運行維護(hù)過程中面臨的壓力和復(fù)雜度也是顯而易見的。引入虛擬化設(shè)計方式之后，在不改變傳統(tǒng)設(shè)計的網(wǎng)絡(luò)物理拓?fù)?、保證現(xiàn)有布線方式的前提下，以IRF技術(shù)實現(xiàn)網(wǎng)絡(luò)各層的橫向整合，即將交換網(wǎng)絡(luò)每一層的多臺物理設(shè)備使用IRF技術(shù)形成一個統(tǒng)一的交換架構(gòu)，減少了邏輯上的設(shè)備數(shù)量。虛擬化整合后的IRF系統(tǒng)，對外表現(xiàn)為單臺物理設(shè)備，因此，在保持網(wǎng)絡(luò)基本互聯(lián)條件下(上圖左邊組網(wǎng)圖所示)，可將一對IRF系統(tǒng)之間的多條線纜進(jìn)行鏈路捆綁聚合動作(上圖中間組網(wǎng)圖所示)，從而將不同網(wǎng)絡(luò)層之間的網(wǎng)狀互聯(lián)簡化成單條邏輯鏈路(上圖右邊組網(wǎng)圖所示)。在虛擬化整合過程中，被整合設(shè)備的互聯(lián)電纜成為IRF的內(nèi)部互聯(lián)電纜，對IRF系統(tǒng)外部來說不可見。兩臺設(shè)備之間原有的捆綁互聯(lián)端口，其歸屬的VLAN三層接口網(wǎng)段均能由其它設(shè)備可達(dá)(如ping通)。而歸屬到IRF系統(tǒng)內(nèi)部后，不對互聯(lián)電纜接口進(jìn)行IP配置，因此將與IRF外部網(wǎng)絡(luò)隔離。IRF組網(wǎng)條件下，對整個網(wǎng)絡(luò)的配置管理發(fā)生了很大變化：原來的多臺物理設(shè)備現(xiàn)在成為一臺邏輯設(shè)備，也只有一個管理IP，其中所有的IRF成員可以統(tǒng)一配置管理，不需要登錄到不同設(shè)備各自管理運維。使用IRF進(jìn)行網(wǎng)絡(luò)簡化時，對網(wǎng)絡(luò)匯聚層或服務(wù)器網(wǎng)關(guān)層的虛擬化整合是必要的，因為這是消除生成樹和VRRP的關(guān)鍵網(wǎng)絡(luò)層。對于接入層設(shè)備（以Top of Rack接入為例）來說，一般使用兩臺交換機(jī)對同類業(yè)務(wù)系統(tǒng)服務(wù)器進(jìn)行接入，以滿足服務(wù)器的雙網(wǎng)卡上行要求。上行到IRF系統(tǒng)的服務(wù)器所有網(wǎng)卡如同接入一臺交換機(jī)，適用于各種工作模式，特別是服務(wù)器的雙網(wǎng)卡捆綁方式（上圖右圖所示）。除了支持網(wǎng)卡主備模式（上圖左圖和中圖），IRF本身可支持跨設(shè)備的鏈路聚合，因此服務(wù)器多網(wǎng)卡上行到一個IRF系統(tǒng)的不同交換機(jī)均可實現(xiàn)LACP捆綁，實現(xiàn)網(wǎng)卡吞吐帶寬增強(qiáng)和可靠性提升。在數(shù)據(jù)中心IRF架構(gòu)實施中，VLAN和IP的設(shè)計變得十分簡單。在網(wǎng)絡(luò)各層互聯(lián)上，使用鏈路捆綁方式在多條物理鏈路上虛擬出了一個聚合層，也就是捆綁后的邏輯鏈路。因為聚合/捆綁后的交換機(jī)端口群（可能分布在IRF的不同成員上)被視為單個邏輯端口使用，聚合組替代了原來的物理端口成為VLAN設(shè)計的考慮因素。采用IRF設(shè)計后消除了網(wǎng)絡(luò)環(huán)路，在不考慮生成樹協(xié)議條件下，VLAN的設(shè)計在滿足業(yè)務(wù)連通性上已經(jīng)十分簡單。核心層與匯聚層之間的連接簡化為只通過一個VLAN進(jìn)行三層互聯(lián)了，將本來Full Mesh全連接的網(wǎng)狀網(wǎng)變成了簡單的單邏輯鏈路連接。這時，原來互聯(lián)所需的IP地址也大大減少了。上圖左邊的網(wǎng)絡(luò)結(jié)構(gòu)中，三層互聯(lián)鏈路成網(wǎng)狀，所需網(wǎng)段很多，一般一條物理鏈路對應(yīng)一個互聯(lián)網(wǎng)段。在運行動態(tài)路由、使能生成樹條件下，任意物理鏈路的Up/Down故障都會引起網(wǎng)絡(luò)路由的振蕩、VRRP狀態(tài)變化或生成樹的重新計算，甚至可能引起應(yīng)用系統(tǒng)業(yè)務(wù)流的中斷（在協(xié)議計算收斂條件下的業(yè)務(wù)恢復(fù)時間可達(dá)到數(shù)秒甚至分鐘級)。而上圖右邊的網(wǎng)絡(luò)采用IRF，網(wǎng)絡(luò)節(jié)點之間以多鏈路捆綁組模式互聯(lián)（普通方式下為1～4條物理鏈路)。即使捆綁組中任意一