【正文】 通過(guò)裸光纖或是DWDM將多個(gè)（例如4個(gè)）數(shù)據(jù)中心互聯(lián)?；诼愎饫w或DWDM線路的二層互聯(lián)方案有兩種選擇：HUBSPOKE方案和RRPP環(huán)網(wǎng)方案。圖3.在裸光纖或是DWDM互聯(lián)組網(wǎng)方案中，DCI互聯(lián)的兩端PE設(shè)備必須支持IRF，將PE之間的兩條（或多條）鏈路通過(guò)聚合（LACP）技術(shù)形成一條邏輯鏈路，會(huì)極大的簡(jiǎn)化DCI的組網(wǎng)拓?fù)洹Ｈ绻Y(jié)合提高互聯(lián)帶寬的需求，則建議設(shè)計(jì)負(fù)載分擔(dān)的互聯(lián)路徑，在提高互聯(lián)帶寬的同時(shí)，也能夠保證系統(tǒng)異常時(shí)能夠?qū)崿F(xiàn)業(yè)務(wù)的快速收斂，提高HA指標(biāo)。HA數(shù)據(jù)中心二層互聯(lián)的關(guān)鍵因素就是如何提高可用性。從帶寬資源的分配情況來(lái)看，裸光纖或DWDM的帶寬資源最為充足，VPLS和IP網(wǎng)絡(luò)的帶寬資源相對(duì)緊張，必須部署全網(wǎng)端到端的QoS優(yōu)先級(jí)來(lái)保證DCI業(yè)務(wù)流量的帶寬要求。帶寬數(shù)據(jù)中心互聯(lián)的核心需求之一就是保證虛擬機(jī)跨DC的遷移。VPLS網(wǎng)絡(luò)通常應(yīng)用于企業(yè)或是行業(yè)的專用業(yè)務(wù)，流量環(huán)境相對(duì)于IP網(wǎng)絡(luò)較簡(jiǎn)單，所以在部署QoS方面有一定優(yōu)勢(shì)。需要注意的是，在VPLS或是IP網(wǎng)絡(luò)環(huán)境中，由于網(wǎng)絡(luò)中存在大量復(fù)雜的應(yīng)用，所以必須通過(guò)部署全網(wǎng)QoS來(lái)保證DCI互聯(lián)數(shù)據(jù)流的服務(wù)質(zhì)量。第二個(gè)要求是存儲(chǔ)網(wǎng)絡(luò)。時(shí)延數(shù)據(jù)中心之間二層互聯(lián)是為了實(shí)現(xiàn)虛擬機(jī)的異地調(diào)度和集群異地應(yīng)用，為了實(shí)現(xiàn)這一點(diǎn)，必須滿足虛擬機(jī)VMotion和集群存儲(chǔ)異地訪問(wèn)的時(shí)延要求。網(wǎng)絡(luò)資源的不同直接決定了用戶將采用何種組網(wǎng)方案：l 運(yùn)營(yíng)商、大型互聯(lián)網(wǎng)企業(yè)：裸光纖或DWDM傳輸資源，對(duì)應(yīng)RRPP環(huán)網(wǎng)方案或HUBSPOKE方案；l 運(yùn)營(yíng)商、大企業(yè)、金融、政府機(jī)構(gòu)：MPLS網(wǎng)絡(luò)，對(duì)應(yīng)VPLS組網(wǎng)方案；l 中小企業(yè)客戶：IP網(wǎng)絡(luò)，對(duì)應(yīng)VPLS over GRE組網(wǎng)方案—— 4 數(shù)據(jù)中心二層互聯(lián)設(shè)計(jì)要點(diǎn)——為簡(jiǎn)化運(yùn)維，互聯(lián)方案需要實(shí)現(xiàn)SingleSided部署，即新增或刪除互聯(lián)站點(diǎn)時(shí)已有站點(diǎn)的配置不受影響，降低運(yùn)維管理難度。比如能支持?jǐn)?shù)十個(gè)以上站點(diǎn)互聯(lián)、成千上萬(wàn)個(gè)VLAN擴(kuò)展、上百萬(wàn)MAC地址，以滿足大規(guī)模/超大規(guī)模數(shù)據(jù)中心和海量虛擬機(jī)遷移的需要；l 高帶寬利用率：數(shù)據(jù)中心之間的廣域網(wǎng)帶寬資源通常是租用的，需要得到高效利用。虛擬機(jī)動(dòng)態(tài)遷移數(shù)據(jù)中心互聯(lián)規(guī)模及大量虛擬機(jī)頻繁遷移對(duì)數(shù)據(jù)中心間二層互聯(lián)也提出了新的要求，體現(xiàn)在以下幾個(gè)方面：l 遷移至另一中心的虛擬機(jī)不僅保留原有IP地址，而且還保持遷移前的運(yùn)行狀態(tài)（如TCP會(huì)話狀態(tài)），所以必須將涉及虛擬機(jī)遷移的物理服務(wù)器接入同一個(gè)二層網(wǎng)絡(luò)（虛擬機(jī)在遷移前后的網(wǎng)關(guān)不變），這種應(yīng)用場(chǎng)景要求構(gòu)建跨中心的二層互聯(lián)網(wǎng)絡(luò)。與服務(wù)器搬遷類似的情況是“虛擬機(jī)遷移”。因此，構(gòu)建跨中心的二層互聯(lián)網(wǎng)絡(luò)可保留被遷移服務(wù)器的IP地址，進(jìn)而簡(jiǎn)化遷移過(guò)程；l n 服務(wù)器搬遷和虛擬機(jī)動(dòng)態(tài)遷移數(shù)據(jù)中心進(jìn)行擴(kuò)建或搬遷時(shí)，需要將物理服務(wù)器從一個(gè)數(shù)據(jù)中心遷至另一個(gè)數(shù)據(jù)中心。多數(shù)廠商（HP、IBM、微軟、Veritas等）的集群軟件需要各服務(wù)器間采用二層網(wǎng)絡(luò)互聯(lián)。圖1.也稱為后端存儲(chǔ)網(wǎng)絡(luò)互聯(lián)。也稱為數(shù)據(jù)中心服務(wù)器網(wǎng)絡(luò)互聯(lián)。不同數(shù)據(jù)中心（主中心、災(zāi)備中心）的前端網(wǎng)絡(luò)通過(guò)IP技術(shù)實(shí)現(xiàn)互聯(lián)，園區(qū)或分支的客戶端通過(guò)前端網(wǎng)絡(luò)訪問(wèn)各數(shù)據(jù)中心。l 網(wǎng)絡(luò)三層互聯(lián)。 DCI互聯(lián)跟蹤分析文檔1 引言在傳統(tǒng)的數(shù)據(jù)中心服務(wù)器區(qū)網(wǎng)絡(luò)設(shè)計(jì)中，通常將二層網(wǎng)絡(luò)的范圍限制在網(wǎng)絡(luò)匯聚層以下，通過(guò)配置跨匯聚交換機(jī)的VLAN，可以將二層網(wǎng)絡(luò)擴(kuò)展到多臺(tái)接入交換機(jī)，這種方案為服務(wù)器網(wǎng)絡(luò)接入層提供了靈活擴(kuò)展能力。近年來(lái)，服務(wù)器高可用集群技術(shù)和虛擬服務(wù)器動(dòng)態(tài)遷移技術(shù)（如VMware的VMotion）在數(shù)據(jù)中心容災(zāi)及計(jì)算資源調(diào)配方面得以廣泛應(yīng)用，這兩種技術(shù)不僅要求在數(shù)據(jù)中心內(nèi)實(shí)現(xiàn)大二層網(wǎng)絡(luò)接入，而且要求在數(shù)據(jù)中心間也實(shí)現(xiàn)大范圍二層網(wǎng)絡(luò)擴(kuò)展(DCI: Data Center Interconnection)2 數(shù)據(jù)中心之間的互聯(lián)方式如圖1所示，數(shù)據(jù)中心間通常部署三種互聯(lián)鏈路，每種互聯(lián)鏈路所承載的數(shù)據(jù)不同，實(shí)現(xiàn)的功能不同，并且這三種鏈路在邏輯上相互隔離。也稱為數(shù)據(jù)中心前端網(wǎng)絡(luò)互聯(lián)，所謂“前端網(wǎng)絡(luò)”是指數(shù)據(jù)中心面向企業(yè)園區(qū)網(wǎng)或企業(yè)廣域網(wǎng)的出口。當(dāng)主數(shù)據(jù)中心發(fā)生災(zāi)難時(shí)，前端網(wǎng)絡(luò)將實(shí)現(xiàn)快速收斂，客戶端通過(guò)訪問(wèn)災(zāi)備中心以保障業(yè)務(wù)連續(xù)性；l 網(wǎng)絡(luò)二層互聯(lián)。在不同的數(shù)據(jù)中心服務(wù)器網(wǎng)絡(luò)接入層，構(gòu)建一個(gè)跨數(shù)據(jù)中心的大二層網(wǎng)絡(luò)（VLAN），以滿足服務(wù)器集群或虛擬機(jī)動(dòng)態(tài)遷移等場(chǎng)景對(duì)二層網(wǎng)絡(luò)接入的需求；l SAN互聯(lián)。借助傳輸技術(shù)（DWDM、SDH等）實(shí)現(xiàn)主中心和災(zāi)備中心間磁盤陣列的數(shù)據(jù)復(fù)制。數(shù)據(jù)中心的三種互聯(lián)方式3 數(shù)據(jù)中心二層互聯(lián)的業(yè)務(wù)需求n 服務(wù)器高可用集群服務(wù)器集群（Cluster），是借助集群軟件將網(wǎng)絡(luò)上的多臺(tái)服務(wù)器關(guān)聯(lián)在一起，提供一致的服務(wù)，對(duì)外表現(xiàn)為一臺(tái)邏輯服務(wù)器。將集群中的服務(wù)器部署于不同數(shù)據(jù)中心，可實(shí)現(xiàn)跨數(shù)據(jù)中心的應(yīng)用系統(tǒng)容災(zāi)。在此過(guò)程中，考慮以下兩個(gè)因素，需要在數(shù)據(jù)中心間構(gòu)建二層互聯(lián)網(wǎng)絡(luò)：l 當(dāng)服務(wù)器被遷至新機(jī)房，如未構(gòu)建新老中心間的二層互聯(lián)網(wǎng)絡(luò)，則面臨重新規(guī)劃新中心服務(wù)器IP地址的問(wèn)題，同時(shí)還需修改DNS，或修改客戶端應(yīng)用程序配置的服務(wù)器IP。在服務(wù)器搬遷期間，經(jīng)常在給定的時(shí)間內(nèi)，只能將服務(wù)器群的一部分服務(wù)器遷至新中心，為保證業(yè)務(wù)連續(xù)性，需建立跨中心的服務(wù)器集群，構(gòu)建跨越中心的二層互聯(lián)網(wǎng)絡(luò)可實(shí)現(xiàn)服務(wù)器平滑遷移。當(dāng)前，一些服務(wù)器虛擬化軟件可實(shí)現(xiàn)在兩臺(tái)虛擬化的物理服務(wù)器之間對(duì)虛擬機(jī)做動(dòng)態(tài)遷移（如圖2所示）。圖2.可擴(kuò)展性：可擴(kuò)展性主要指在互聯(lián)站點(diǎn)數(shù)、擴(kuò)展VLAN數(shù)和MAC地址容量方面能擴(kuò)展到一定的規(guī)模。數(shù)據(jù)中心互聯(lián)設(shè)備的冗余部署會(huì)導(dǎo)致數(shù)據(jù)中心間存在多條連接路徑，需要將流量均衡地分布在所有可用鏈路上以提高廣域網(wǎng)帶寬資源利用率，節(jié)省帶寬租用成本；l 運(yùn)維簡(jiǎn)化：數(shù)據(jù)中心互聯(lián)方案通常涉及到網(wǎng)絡(luò)側(cè)的協(xié)議部署，傳統(tǒng)的部署方式需要在網(wǎng)絡(luò)側(cè)實(shí)現(xiàn)站點(diǎn)全連接配置，導(dǎo)致新增或刪除互聯(lián)站點(diǎn)時(shí)已有站點(diǎn)的配置也會(huì)受到影響。附：BAT廠商的大二層網(wǎng)絡(luò)需求 待補(bǔ)充。現(xiàn)網(wǎng)狀態(tài)選擇數(shù)據(jù)中心二層互聯(lián)方案的前提要素是明確用戶在多個(gè)數(shù)據(jù)中心之間具有哪些網(wǎng)絡(luò)資源。性能l l第一個(gè)限制是VMotion同步會(huì)話距離。DC之間的存儲(chǔ)必須實(shí)現(xiàn)同步訪問(wèn)或是鏡像訪問(wèn)。流量環(huán)境越復(fù)雜，則QoS配置工作量越大，時(shí)延指標(biāo)越難以滿足。l lvSphere ，VMotion對(duì)于遷移鏈路的帶寬有明確的要求—帶寬不小于622M；vSphere ，VMotion對(duì)于遷移鏈路的帶寬不小于250M?！岣逪A的一個(gè)最有效的方式就是設(shè)計(jì)備份鏈路、備份節(jié)點(diǎn)。以DWDM網(wǎng)絡(luò)為例，建議利用IRF實(shí)現(xiàn)DCI鏈路的高HA和鏈路負(fù)載分擔(dān)設(shè)計(jì)方案。同時(shí)，這兩條HA鏈路的帶寬會(huì)得到100%的利用，達(dá)到1:1的負(fù)載分擔(dān)效果（如圖3所示）。IRF+LACP負(fù)載分擔(dān)設(shè)計(jì)方案數(shù)據(jù)中心二層互聯(lián)方案設(shè)計(jì)裸光纖或DWDM二層互聯(lián)方案需要用戶在現(xiàn)網(wǎng)中擁有光纖或傳輸資源，對(duì)用戶要求較高，但從使用的角度來(lái)看，裸光纖或DWDM方案的性能是最優(yōu)的。前者的優(yōu)點(diǎn)是基于最短路徑轉(zhuǎn)發(fā)，所以轉(zhuǎn)發(fā)效率高；后者的優(yōu)點(diǎn)則是環(huán)網(wǎng)天然的轉(zhuǎn)發(fā)路徑冗余設(shè)計(jì)，所以HA性能較高。為了方便擴(kuò)展更多的數(shù)據(jù)中心節(jié)點(diǎn)，一個(gè)最常用的方案就是采用HUBSPOKE組網(wǎng)模型，即通過(guò)一個(gè)核心節(jié)點(diǎn)與各數(shù)據(jù)中心的匯聚層互聯(lián)。圖4.如何提高核心節(jié)點(diǎn)的HA性能？