【正文】 大學(xué)數(shù)據(jù)中心建設(shè)項(xiàng)目技術(shù)建議書(shū)大學(xué)數(shù)據(jù)中心建設(shè)項(xiàng)目技術(shù)建議書(shū)目錄1 數(shù)據(jù)中心總體架構(gòu) 32 優(yōu)勢(shì)技術(shù)簡(jiǎn)介 5 IRF2虛擬化技術(shù) 5 EVB技術(shù) 8 FCoE技術(shù) 133 業(yè)務(wù)系統(tǒng)部署 17 一般性業(yè)務(wù)系統(tǒng)部署建議 17 核心業(yè)務(wù)系統(tǒng)部署建議 17 數(shù)據(jù)庫(kù)系統(tǒng)部署建議 18 網(wǎng)站及郵件業(yè)務(wù)系統(tǒng)部署建議 18 高并發(fā)業(yè)務(wù)系統(tǒng)部署建議 194 項(xiàng)目管理計(jì)劃 20 項(xiàng)目組結(jié)構(gòu)圖 20 項(xiàng)目組職責(zé) 20 項(xiàng)目團(tuán)隊(duì)成員 22 領(lǐng)導(dǎo)小組 22 項(xiàng)目管理團(tuán)隊(duì) 22 項(xiàng)目實(shí)施人員 23 項(xiàng)目進(jìn)度計(jì)劃 23 項(xiàng)目里程碑 23 項(xiàng)目進(jìn)度管理 23 項(xiàng)目實(shí)施流程 24 流程圖 24 項(xiàng)目啟動(dòng) 24 工程準(zhǔn)備 25 生產(chǎn)備貨 25 環(huán)境準(zhǔn)備 25 工程實(shí)施 26 到貨驗(yàn)收 26 安裝調(diào)試 27 初驗(yàn) 27 試運(yùn)行 28 終驗(yàn) 281 數(shù)據(jù)中心總體架構(gòu)如上圖所示，為項(xiàng)目全景圖。本次某大學(xué)數(shù)據(jù)中心項(xiàng)目。數(shù)據(jù)中心一期將建成學(xué)校新的云計(jì)算數(shù)據(jù)中心。包括存儲(chǔ)資源，計(jì)算資源及網(wǎng)絡(luò)資源。網(wǎng)絡(luò)資源，數(shù)據(jù)中心采用兩臺(tái)H3C S12500X核心交換機(jī)，通過(guò)IRF2虛擬化技術(shù)將兩臺(tái)核心交換機(jī)虛擬為一臺(tái)，每臺(tái)配置一塊48端口萬(wàn)兆/千兆以太網(wǎng)光接口單板，其中12個(gè)端口通過(guò)光模塊切換為千兆以太網(wǎng)光接口，配置冗余主控模塊，6塊交換網(wǎng)板，實(shí)現(xiàn)5+1冗余的同時(shí)，提供所有槽位萬(wàn)兆端口線(xiàn)速轉(zhuǎn)發(fā)，其中一臺(tái)核心交換機(jī)配置一塊48端口千兆以太網(wǎng)電接口單板。配置兩臺(tái)H3C S5800V2數(shù)據(jù)中心接入交換機(jī)，通過(guò)IRF2虛擬化技術(shù)將兩臺(tái)核心交換機(jī)虛擬為一臺(tái)，包括48端口千兆/萬(wàn)兆以太網(wǎng)光接口，4個(gè)40G QSFP以太網(wǎng)光接口，用于連接刀片服務(wù)器及存儲(chǔ)。數(shù)據(jù)中心接入交換機(jī)的端口具備有多重協(xié)議屬性，端口可以支持IP協(xié)議，F(xiàn)C協(xié)議，F(xiàn)CoE協(xié)議。計(jì)算資源包括4臺(tái)UIS8000刀片服務(wù)器，共配置48臺(tái)兩路刀片服務(wù)器和8臺(tái)4路刀片服務(wù)器。每個(gè)UIS8000刀片服務(wù)器機(jī)箱配置有兩塊冗余的網(wǎng)絡(luò)模塊，可以為每一個(gè)刀片服務(wù)器提供10G的上行鏈路帶寬。每臺(tái)UIS8000刀片服務(wù)器通過(guò)萬(wàn)兆以太網(wǎng)光接口上聯(lián)到接入交換機(jī)。通過(guò)FCoE技術(shù)進(jìn)行存儲(chǔ)業(yè)務(wù)的交換，通過(guò)以太網(wǎng)技術(shù)進(jìn)行數(shù)據(jù)業(yè)務(wù)的交換。通過(guò)融合數(shù)據(jù)中心的組網(wǎng)方案，網(wǎng)絡(luò)接入模塊連接接入交換機(jī)承擔(dān)數(shù)據(jù)業(yè)務(wù)的轉(zhuǎn)發(fā)和存儲(chǔ)業(yè)務(wù)的轉(zhuǎn)發(fā)。網(wǎng)絡(luò)連接方式方面，接入交換機(jī)通過(guò)跨設(shè)備的鏈路聚合上聯(lián)到核心交換機(jī)，在任何一個(gè)核心交換機(jī)出現(xiàn)問(wèn)題或者是接口單板出現(xiàn)問(wèn)題時(shí)，業(yè)務(wù)不會(huì)受到任何的影響。同樣，刀片服務(wù)器也通過(guò)跨設(shè)備的鏈路聚合方式連接到接入交換機(jī)，當(dāng)任何一臺(tái)接入交換機(jī)出現(xiàn)問(wèn)題的時(shí)候，業(yè)務(wù)也不會(huì)受到影響。H3C S5800V2數(shù)據(jù)中心接入交換機(jī)支持EVB協(xié)議，可以將虛擬機(jī)的流量引導(dǎo)至物理交換機(jī)，每一個(gè)虛擬機(jī)通過(guò)EVB協(xié)議都會(huì)在物理交換機(jī)上擁有一個(gè)虛擬通道，基于該虛擬通道可以為每一個(gè)虛擬機(jī)部署各自的網(wǎng)絡(luò)策略，同時(shí)能夠觀察到虛擬機(jī)的獨(dú)立流量。通過(guò)EVB技術(shù)，可以大大提高對(duì)虛擬機(jī)的精細(xì)化管理程度。2 優(yōu)勢(shì)技術(shù)簡(jiǎn)介 IRF2虛擬化技術(shù)傳統(tǒng)數(shù)據(jù)中心實(shí)踐通用的是環(huán)路接入拓?fù)淠Ｊ?，以多生成?shù)協(xié)議MSTP配合VRRP提供服務(wù)器接入的可靠性，同時(shí)，服務(wù)器又以多網(wǎng)卡連接網(wǎng)絡(luò)進(jìn)一步提供冗余能力。但從網(wǎng)絡(luò)拓?fù)涞脑O(shè)計(jì)、環(huán)路規(guī)避、冗余備份等角度考慮，其設(shè)計(jì)過(guò)程還是極其復(fù)雜的，如VLAN的規(guī)劃、生成樹(shù)實(shí)例的拓?fù)渥枞⒕W(wǎng)關(guān)冗余選擇，包括相應(yīng)技術(shù)參數(shù)的選擇、配置，故障切換的預(yù)期判斷等，都需要一套十分詳細(xì)的流程。而后期在網(wǎng)絡(luò)運(yùn)行維護(hù)過(guò)程中面臨的壓力和復(fù)雜度也是顯而易見(jiàn)的。引入虛擬化設(shè)計(jì)方式之后，在不改變傳統(tǒng)設(shè)計(jì)的網(wǎng)絡(luò)物理拓?fù)?、保證現(xiàn)有布線(xiàn)方式的前提下，以IRF技術(shù)實(shí)現(xiàn)網(wǎng)絡(luò)各層的橫向整合，即將交換網(wǎng)絡(luò)每一層的多臺(tái)物理設(shè)備使用IRF技術(shù)形成一個(gè)統(tǒng)一的交換架構(gòu)，減少了邏輯上的設(shè)備數(shù)量。虛擬化整合后的IRF系統(tǒng)，對(duì)外表現(xiàn)為單臺(tái)物理設(shè)備，因此，在保持網(wǎng)絡(luò)基本互聯(lián)條件下(上圖左邊組網(wǎng)圖所示)，可將一對(duì)IRF系統(tǒng)之間的多條線(xiàn)纜進(jìn)行鏈路捆綁聚合動(dòng)作(上圖中間組網(wǎng)圖所示)，從而將不同網(wǎng)絡(luò)層之間的網(wǎng)狀互聯(lián)簡(jiǎn)化成單條邏輯鏈路(上圖右邊組網(wǎng)圖所示)。在虛擬化整合過(guò)程中，被整合設(shè)備的互聯(lián)電纜成為IRF的內(nèi)部互聯(lián)電纜，對(duì)IRF系統(tǒng)外部來(lái)說(shuō)不可見(jiàn)。兩臺(tái)設(shè)備之間原有的捆綁互聯(lián)端口，其歸屬的VLAN三層接口網(wǎng)段均能由其它設(shè)備可達(dá)(如ping通)。而歸屬到IRF系統(tǒng)內(nèi)部后，不對(duì)互聯(lián)電纜接口進(jìn)行IP配置，因此將與IRF外部網(wǎng)絡(luò)隔離。IRF組網(wǎng)條件下，對(duì)整個(gè)網(wǎng)絡(luò)的配置管理發(fā)生了很大變化：原來(lái)的多臺(tái)物理設(shè)備現(xiàn)在成為一臺(tái)邏輯設(shè)備，也只有一個(gè)管理IP，其中所有的IRF成員可以統(tǒng)一配置管理，不需要登錄到不同設(shè)備各自管理運(yùn)維。使用IRF進(jìn)行網(wǎng)絡(luò)簡(jiǎn)化時(shí)，對(duì)網(wǎng)絡(luò)匯聚層或服務(wù)器網(wǎng)關(guān)層的虛擬化整合是必要的，因?yàn)檫@是消除生成樹(shù)和VRRP的關(guān)鍵網(wǎng)絡(luò)層。對(duì)于接入層設(shè)備（以Top of Rack接入為例）來(lái)說(shuō)，一般使用兩臺(tái)交換機(jī)對(duì)同類(lèi)業(yè)務(wù)系統(tǒng)服務(wù)器進(jìn)行接入，以滿(mǎn)足服務(wù)器的雙網(wǎng)卡上行要求。上行到IRF系統(tǒng)的服務(wù)器所有網(wǎng)卡如同接入一臺(tái)交換機(jī)，適用于各種工作模式，特別是服務(wù)器的雙網(wǎng)卡捆綁方式（上圖右圖所示）。除了支持網(wǎng)卡主備模式（上圖左圖和中圖），IRF本身可支持跨設(shè)備的鏈路聚合，因此服務(wù)器多網(wǎng)卡上行到一個(gè)IRF系統(tǒng)的不同交換機(jī)均可實(shí)現(xiàn)LACP捆綁，實(shí)現(xiàn)網(wǎng)卡吞吐帶寬增強(qiáng)和可靠性提升。在數(shù)據(jù)中心IRF架構(gòu)實(shí)施中，VLAN和IP的設(shè)計(jì)變得十分簡(jiǎn)單。在網(wǎng)絡(luò)各層互聯(lián)上，使用鏈路捆綁方式在多條物理鏈路上虛擬出了一個(gè)聚合層，也就是捆綁后的邏輯鏈路。因?yàn)榫酆?捆綁后的交換機(jī)端口群（可能分布在IRF的不同成員上)被視為單個(gè)邏輯端口使用，聚合組替代了原來(lái)的物理端口成為VLAN設(shè)計(jì)的考慮因素。采用IRF設(shè)計(jì)后消除了網(wǎng)絡(luò)環(huán)路，在不考慮生成樹(shù)協(xié)議條件下，VLAN的設(shè)計(jì)在滿(mǎn)足業(yè)務(wù)連通性上已經(jīng)十分簡(jiǎn)單。核心層與匯聚層之間的連接簡(jiǎn)化為只通過(guò)一個(gè)VLAN進(jìn)行三層互聯(lián)了，將本來(lái)Full Mesh全連接的網(wǎng)狀網(wǎng)變成了簡(jiǎn)單的單邏輯鏈路連接。這時(shí)，原來(lái)互聯(lián)所需的IP地址也大大減少了。上圖左邊的網(wǎng)絡(luò)結(jié)構(gòu)中，三層互聯(lián)鏈路成網(wǎng)狀，所需網(wǎng)段很多，一般一條物理鏈路對(duì)應(yīng)一個(gè)互聯(lián)網(wǎng)段。在運(yùn)行動(dòng)態(tài)路由、使能生成樹(shù)條件下，任意物理鏈路的Up/Down故障都會(huì)引起網(wǎng)絡(luò)路由的振蕩、VRRP狀態(tài)變化或生成樹(shù)的重新計(jì)算，甚至可能引起應(yīng)用系統(tǒng)業(yè)務(wù)流的中斷（在協(xié)議計(jì)算收斂條件下的業(yè)務(wù)恢復(fù)時(shí)間可達(dá)到數(shù)秒甚至分鐘級(jí))。而上圖右邊的網(wǎng)絡(luò)采用IRF，網(wǎng)絡(luò)節(jié)點(diǎn)之間以多鏈路捆綁組模式互聯(lián)（普通方式下為1～4條物理鏈路)。即使捆綁組中任意一