【正文】 行通過(guò)光盤(pán)進(jìn)行操作系統(tǒng)重新安裝，硬盤(pán)重新分區(qū)，IP 地址重新設(shè)置，以及備份軟件重新安裝等復(fù)雜的步驟。如果企業(yè)在幾個(gè)地點(diǎn)都有數(shù)據(jù)或數(shù)據(jù)密集型應(yīng)用，比如數(shù)據(jù)倉(cāng)庫(kù)，則可安裝介 第 18 頁(yè)質(zhì)服務(wù)器（Media Server） 即架構(gòu)的第二層。這樣用戶就能釋放磁盤(pán)空間，以備將來(lái)使用。在備份的第一階段，按策略對(duì)客戶端進(jìn)行備份，該策略將磁盤(pán)緩沖存儲(chǔ)設(shè)備作為目的存儲(chǔ)設(shè)備。磁盤(pán)緩沖的工作原理，磁盤(pán)緩沖的工作原理示例如下：假定 NetBackup 客戶生成的備份數(shù)據(jù)的容量如下：星期一：200MB星期二：300MB星期三：300MB星期四：200MB星期五：500MB假定 NetBackup 客戶每天都將數(shù)據(jù)備份到磁盤(pán)緩沖存儲(chǔ)設(shè)備上，然后再將數(shù)據(jù)從磁盤(pán)緩沖存儲(chǔ)設(shè)備轉(zhuǎn)移到最后的存儲(chǔ)設(shè)備上。如果生產(chǎn)點(diǎn)的備份服務(wù)器損壞，則影響了正 第 15 頁(yè)常的備份。由于生產(chǎn)和測(cè)試網(wǎng)在物理上是隔開(kāi)的，所以需要分別安裝兩套備份服務(wù)器。如果數(shù)據(jù)被并行定位（colocated）到多盤(pán)磁帶上,執(zhí)行選擇性恢復(fù)的過(guò)程將會(huì)很快。N 節(jié)點(diǎn)（N=2）循環(huán)備份系統(tǒng)簡(jiǎn)單示意圖如下圖（圖三）： 軟件安裝在兩種情況下，每個(gè)地點(diǎn)的每臺(tái)服務(wù)器上安裝的軟件相同，只是不同情況下配置方法不同，每臺(tái)服務(wù)器的具體配置方法后面討論。“N+1”備份方式的缺點(diǎn)是當(dāng)多個(gè)系統(tǒng)同時(shí)發(fā)生故障，如果只有一套備份系統(tǒng)為所有用戶提供服務(wù)，可能導(dǎo)致服務(wù)質(zhì)量的下降。 IPNET 流量管理服務(wù)器及 NetCool 匯總管理服務(wù)器“N+1” 冗余備份方式對(duì)于該子系統(tǒng)，VERITAS 解決方案能夠按照現(xiàn)業(yè)務(wù)系統(tǒng)的要求實(shí)現(xiàn)多種容災(zāi)模型。 方案概述針對(duì) IP 網(wǎng)管系統(tǒng)及各子系統(tǒng)實(shí)際分析得出的 RPO/RTO，我們分別采用不同的技術(shù)手段對(duì)其實(shí)現(xiàn)高可用保護(hù)。因?yàn)橐坏┏霈F(xiàn)異常情況，如火災(zāi)、爆炸、地震、水災(zāi)、雷擊或某個(gè)方向線路故障等自然原因以及電源機(jī)器故障、人為破壞等非自然原因引起的災(zāi)難，導(dǎo)致業(yè)務(wù)正常無(wú)法進(jìn)行和重要數(shù)據(jù)的丟失、破壞，造成的損失將不可估量。也就是說(shuō)，Tier5 需要兩中心與中心的數(shù)據(jù)都被同時(shí)更新。2 層 PTAM 卡車運(yùn)送訪問(wèn)方式+熱備份中心 (PTAM + Hot Center)Tier2 相當(dāng)于 Tier1 再加上熱備份中心能力的進(jìn)一步的災(zāi)難恢復(fù)。可以根據(jù)企業(yè)數(shù)據(jù)的重要性以及需要恢復(fù)的速度和程度，來(lái)設(shè)計(jì)選擇并實(shí)現(xiàn)災(zāi)難恢復(fù)計(jì)劃。事實(shí)上，我國(guó) 2022 年遭遇的“非典”，某種意義上也是災(zāi)難。常言道，“知己知彼，百戰(zhàn)不殆”。對(duì)于 IT 系統(tǒng)而言，在技術(shù)層面上，容災(zāi)需要考慮：* 數(shù)據(jù)版本保護(hù) － 建立容災(zāi)的多版本保護(hù)底線（Bottom Line）* 實(shí)時(shí)數(shù)據(jù)保護(hù) － 數(shù)據(jù)復(fù)制，近乎 0 的數(shù)據(jù)丟失，數(shù)據(jù)一致性* 應(yīng)用系統(tǒng)恢復(fù) － 恢復(fù)時(shí)間（包括數(shù)據(jù)庫(kù)恢復(fù)）、應(yīng)用版本的一致性（PTF）等* 網(wǎng)絡(luò)系統(tǒng)恢復(fù) － 數(shù)據(jù)訪問(wèn)點(diǎn)變化、建立新網(wǎng)絡(luò)路徑、動(dòng)態(tài)路由（收斂時(shí)間/穩(wěn)定性）* 容災(zāi)切換決策 － 及時(shí)發(fā)現(xiàn)災(zāi)難（容災(zāi)系統(tǒng)管理）、容災(zāi)切換的損失和補(bǔ)救辦法* 容災(zāi)切換過(guò)程 － 變更管理同時(shí)，無(wú)論任何時(shí)候，備份都是非常重要的，并要定期測(cè)試備份的可靠性。數(shù)據(jù)僅在本地進(jìn)行備份恢復(fù)，沒(méi)有數(shù)據(jù)送往異地。 第 5 頁(yè)3 層 電子鏈接 (Electronic Vaulting)Tier3 是在 Tier2 的基礎(chǔ)上用電子鏈路取代了卡車進(jìn)行數(shù)據(jù)的傳送的進(jìn)一步的災(zāi)難恢復(fù)。 需求簡(jiǎn)析對(duì)于 IT 系統(tǒng)的容災(zāi)指標(biāo)，我們可以通過(guò)下列參數(shù)表示：* 以恢復(fù)點(diǎn)為目標(biāo)(RPO Recovery Point Object）– – 數(shù)據(jù)的完整性(無(wú)數(shù)據(jù)丟失)– – 數(shù)據(jù)的一致性(數(shù)據(jù)正確且可用）以恢復(fù)時(shí)間為目標(biāo)(RTO Recovery Time Object） 第 6 頁(yè)中國(guó)移動(dòng)公司的網(wǎng)管系統(tǒng)結(jié)構(gòu)圖如下：可以看到在移動(dòng) IP 網(wǎng)管系統(tǒng)中，包含著眾多的功能子系統(tǒng)，根據(jù)每個(gè)子系統(tǒng)數(shù)據(jù)變化的頻度以及在整個(gè)網(wǎng)管系統(tǒng)中所起到的作用，我們?yōu)槊總€(gè)子系統(tǒng)制定了符合各自特色的 RPO 和 RTO。 第 8 頁(yè)2 高可用容災(zāi)方案設(shè)計(jì) 設(shè)計(jì)原則我們?yōu)橐苿?dòng)公司綜合結(jié)算提供的高可用容災(zāi)方案的設(shè)計(jì)原則如下：? 方案當(dāng)前即可實(shí)施? 在滿足要求的前提下盡量簡(jiǎn)單? 除特別必要，不需要增加另外超出本方案的軟硬件? 如果一個(gè)軟件產(chǎn)品可以實(shí)現(xiàn)需要的功能，我們不會(huì)再使用另外的產(chǎn)品實(shí)現(xiàn)重復(fù)的功能? 同一方案適合多種平臺(tái)環(huán)境，降低安裝、管理和維護(hù)的難度。2． NetCool 網(wǎng)管服務(wù)器 /PM 服務(wù)器、業(yè)務(wù)網(wǎng)管服務(wù)器、 Precision 服務(wù)器該系統(tǒng)屬于業(yè)務(wù)管理系統(tǒng)，直接關(guān)系到管理人員能否順利地進(jìn)行網(wǎng)絡(luò)日常的管理和維護(hù)，并關(guān)系到 IP 業(yè)務(wù)的正常運(yùn)行，因此需要及時(shí)在容災(zāi)節(jié)點(diǎn)實(shí)現(xiàn)接管，但該業(yè)務(wù)子系統(tǒng)的數(shù)據(jù)更新率并不高，而且周期性比較強(qiáng)，因此沒(méi)有必要花費(fèi)高昂的代價(jià)進(jìn)行實(shí)時(shí)的數(shù)據(jù)復(fù)制，可以采用主節(jié)點(diǎn)數(shù)據(jù)備份，容災(zāi)節(jié) 第 10 頁(yè)點(diǎn)異地?cái)?shù)據(jù)恢復(fù)的手段保證數(shù)據(jù)的完整性和一致性。這種方式下， N 個(gè)正在運(yùn)行的業(yè)務(wù)系統(tǒng)中的任何數(shù)據(jù)的更改，包括靜態(tài)數(shù)據(jù)更改與動(dòng)態(tài)數(shù)據(jù)更改，都必須同步到備用系統(tǒng)中。...數(shù)據(jù)傳輸方向圖二 多對(duì)一備份Site 1 Site nSite n+1Site 2 第 12 頁(yè)Site A 運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site B 業(yè)務(wù)系統(tǒng)的備份系統(tǒng)；同理，Site B 運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site A 的備份系統(tǒng)。裸金屬恢復(fù) BMR(Bare Metal Restore) 對(duì)于系統(tǒng)中的 HPUX, IBM AIX, Microsoft Windows NT/2022 和 Sun Solaris 等不同操作系統(tǒng)環(huán)境，我們通過(guò) VERITAS Bare Metal Restore（裸機(jī)恢復(fù)）功能，來(lái)簡(jiǎn)化服務(wù)器的恢復(fù)過(guò)程，以完成系統(tǒng)的快速災(zāi)難恢復(fù)。真正映象恢復(fù)(True Image Recovery ）使用全備份和增量備份后,恢復(fù)時(shí)根據(jù)映象(image)恢復(fù),真正做到已刪除文件無(wú)需恢復(fù),再進(jìn)行增量恢復(fù)和文件刪除。? Bare Metal Restore：所有服務(wù)器實(shí)現(xiàn)裸機(jī)恢復(fù)。以上是為我們?yōu)闃I(yè)務(wù)系統(tǒng)提供的數(shù)據(jù)備份復(fù)方案，設(shè)計(jì)的目的是采用業(yè)界最先進(jìn)的備份技術(shù)完成對(duì)系統(tǒng)數(shù)據(jù)在線、快速、有效的磁帶備份保護(hù)。如果管理員想在磁盤(pán)上保存超過(guò)一天的數(shù) 第 16 頁(yè)據(jù)，則應(yīng)對(duì)磁盤(pán)空間進(jìn)行調(diào)整。在磁盤(pán)緩沖的第二階段，將鏡像從磁盤(pán)緩沖存儲(chǔ)設(shè)備重新定向到目的存儲(chǔ)設(shè)備。以往數(shù)據(jù)中心曾是大型機(jī)一統(tǒng)天下，現(xiàn)在則是以大型 UNIX、Windows 服務(wù)器以及集群為基礎(chǔ)，企業(yè)在此之上構(gòu)建并運(yùn)行和管理關(guān)鍵業(yè)務(wù)應(yīng)用。如果某臺(tái)介質(zhì)服務(wù)器因故障或其他問(wèn)題不能正常工作，可將這一臺(tái)介質(zhì)服務(wù)器的備份任務(wù)轉(zhuǎn)移到另一臺(tái)介質(zhì)服務(wù)器上進(jìn)行。 BMR 服務(wù)器驅(qū)動(dòng)啟動(dòng)服務(wù)器和文件服務(wù)器，使客戶機(jī)自動(dòng)獲得啟動(dòng)鏡像和恢復(fù)計(jì)劃。各個(gè)軟件的功能完全集成在一起，建立一個(gè)容遠(yuǎn)程數(shù)據(jù)復(fù)制、本地容災(zāi)、遠(yuǎn)程應(yīng)用切換于一體的方案。復(fù)制的數(shù)據(jù)可以是數(shù)據(jù)庫(kù)中的數(shù)據(jù)（文件方式或裸設(shè)備方式）和文件。然后，在 Site A 定義 RLINK to_c1，指向 Site C；在 Site B 定義 RLINK to_c2，指向 Site C；在 Site C 定義兩個(gè) RLINK，一個(gè) to_a,指向 Site A,另一個(gè) to_b,指向 Site B。DCM 在正常情況下不使用，在 SRL 滿后記錄變化的數(shù)據(jù)塊的塊號(hào)，當(dāng)恢復(fù)正常復(fù)制后，等SRL 中的數(shù)據(jù)傳送完后，將 DCM 中記錄的塊傳送到異地。在主節(jié)點(diǎn)往后備節(jié)點(diǎn)正常復(fù)制數(shù)據(jù)前，必須逐塊逐塊地將主節(jié)點(diǎn)中需要復(fù)制的數(shù)據(jù)拷貝到后備節(jié)點(diǎn)，也就是說(shuō)，將雙方的 RVG 進(jìn)行同步。在備份開(kāi)始前，在主節(jié)點(diǎn)設(shè)置檢查點(diǎn)，該檢查點(diǎn)記錄在SRL 中，然后將數(shù)據(jù)備份到活動(dòng)硬盤(pán)、光盤(pán)、磁帶或其它介質(zhì)上。反向同步有兩種情況，一種是在災(zāi)難發(fā)生時(shí)刻，原主節(jié)點(diǎn)與災(zāi)備節(jié)點(diǎn)的數(shù)據(jù)是同步的（即無(wú)未復(fù)制的數(shù)據(jù)）；第二種是在災(zāi)難發(fā)生時(shí)刻，原主節(jié)點(diǎn)與災(zāi)備節(jié)點(diǎn)的數(shù)據(jù)不是完全同步的（即主節(jié)點(diǎn)有數(shù)據(jù)尚未復(fù)制到災(zāi)備節(jié)點(diǎn)）。脫機(jī)處理由打破后備節(jié)點(diǎn)的鏡像卷、對(duì)鏡像數(shù)據(jù)進(jìn)行處理、重鏡像等幾個(gè)過(guò)程組成。在本方案中，VCS 主要負(fù)責(zé)以下功能：1） VCS 負(fù)責(zé)監(jiān)控和管理硬件系統(tǒng)和操作系統(tǒng)，當(dāng)出現(xiàn)故障時(shí)進(jìn)行切換。四、Global Cluster Server（簡(jiǎn)稱 GCM）可以稱為 Cluster’s Cluster（集群的集群）。創(chuàng)建一個(gè) disk group，包括涉及的磁盤(pán)，并在這些磁盤(pán)上劃分出需要的卷，包括用于 SRL 的卷。5) 進(jìn)行數(shù)據(jù)復(fù)制。用手工模式進(jìn)行異地容災(zāi)切換測(cè)試，并調(diào)優(yōu)化有關(guān)參數(shù)。4） GCM 監(jiān)控兩地 Cluster 系統(tǒng)的運(yùn)行。3） A 地點(diǎn)的業(yè)務(wù)將在 B 地點(diǎn)正常提供服務(wù)。六、 如果 A、B 地點(diǎn)間網(wǎng)絡(luò)在短時(shí)間內(nèi)恢復(fù)正常。數(shù)據(jù)反向復(fù)制時(shí)只復(fù)制災(zāi)難期間變化的數(shù)據(jù)而不是所有的數(shù)據(jù)，這是本方案優(yōu)勢(shì)之一。也就是說(shuō)，A 中有一些本地已經(jīng)修改，而 B 還未修改的數(shù)據(jù)。9） GCM 控制進(jìn)行整個(gè)系統(tǒng)的反向切換。對(duì)于 VVR 對(duì)數(shù)據(jù)庫(kù)內(nèi)容的復(fù)制，就 oracle 為例，有兩種方法：1）僅復(fù)制 Archive Log 和 Online Redo Log。例如一般情況下，網(wǎng)絡(luò)故障在 8 小時(shí)內(nèi)修復(fù)，則將 SRL 的容量定為 8 小時(shí)內(nèi)數(shù)據(jù)變化量再加上一定的冗余。四、 本方案支持 1+N+1 和節(jié)點(diǎn)互備方式，滿足用戶的不同需求。以我們?cè)谝酝鶎?shí)施中的經(jīng)驗(yàn)，如果采用異步復(fù)制方式，對(duì)整個(gè)系統(tǒng)的影響，在 5%左右。VERITAS Cluster Server 2。VERITAS 公司于 1982 年成立于加利福尼亞的 Mountain View，現(xiàn)擁有員工3500 余名，在全球多個(gè)國(guó)家設(shè)立分公司或辦事處。從數(shù)據(jù)產(chǎn)生到數(shù)據(jù)保存的整個(gè)過(guò)程中，VERITAS 提供的軟件產(chǎn)品能夠確保系統(tǒng)數(shù)據(jù)存儲(chǔ)的高性能、 高擴(kuò)展性和高可用性。這些解決方案的核心是 VERITAS 存儲(chǔ)產(chǎn)品——VERITAS Volume Manager?和VERITAS File System。該產(chǎn)品具有可擴(kuò)展的性能與特性，足以滿足客戶機(jī)/服務(wù)器環(huán)境中不斷增強(qiáng)的用戶需求。同時(shí)，通過(guò)使用冗余技術(shù)提高數(shù)據(jù)可用性，卷管理程序還能夠有效防止磁盤(pán)與硬件故障造成的數(shù)據(jù)丟失與崩潰。在發(fā)生系統(tǒng)崩潰時(shí)，恢復(fù)程序?qū)⒅匦嘛@示日志記錄中的未完成操作。VERITAS Storage Foundation 允許用戶不間斷地對(duì)重要數(shù)據(jù)進(jìn)行訪問(wèn)，使客戶能夠從其計(jì)算環(huán)境中獲取最大收益。解決方案說(shuō)明VERIAS Storage Foundation 產(chǎn)品為確保企業(yè)系統(tǒng)和 SAN 環(huán)境的高性能、持續(xù)可用性和可管理性提供了核心技術(shù)。 第 40 頁(yè)VERITAS File System??用戶與管理員工作效率提高VERITAS File System 能夠進(jìn)行聯(lián)機(jī)系統(tǒng)備份，這樣在備份操作過(guò)程中用戶也可以對(duì)數(shù)據(jù)進(jìn)行訪問(wèn)。通過(guò)將數(shù)據(jù)映像到快速靈活的存儲(chǔ)器上（如RAM 驅(qū)動(dòng)器或固定狀態(tài)磁盤(pán)）可以加快訪問(wèn)關(guān)鍵信息的速度。這些工具可確保提供持續(xù)的數(shù)據(jù)可用性、易用性與數(shù)據(jù)保護(hù)。管理涉及各種存儲(chǔ)介質(zhì)，包括磁盤(pán)，光盤(pán)和磁帶。為保證提供集成的一攬子軟件存儲(chǔ)管理解決方案，VERITAS Software 與業(yè)界所有大型企業(yè)都建立了戰(zhàn)略合作伙伴關(guān)系。VERITAS BMR 第 35 頁(yè) IPNET 和 NetCool 報(bào)表服務(wù)器軟件配置（每節(jié)點(diǎn)）1。VERITAS Cluster Server Application Agent4。六、 基線建立，需要主備節(jié)點(diǎn)的數(shù)據(jù)完全同步。但在實(shí)際情況中，由于發(fā)生重大災(zāi)難時(shí)業(yè)務(wù)異地切換屬于非常嚴(yán)重的事故，所以我們建議該過(guò)程前用戶進(jìn)行電話確認(rèn)，然后在 GCM 界面中按下切換確認(rèn)按鈕進(jìn)行切換。該方法的優(yōu)點(diǎn)是更好地保持?jǐn)?shù)據(jù)的一致性，而且發(fā)生災(zāi)難時(shí)，后備系統(tǒng)恢復(fù)正常服務(wù)的時(shí)間較短。通過(guò)分析，說(shuō)明方案符合需求，并進(jìn)一步講解方案的細(xì)節(jié)。B 節(jié)點(diǎn)將進(jìn)行判斷，根據(jù)數(shù)據(jù)塊是否有新的修改，對(duì) DCM 進(jìn)行置位。以下過(guò)程將在腳本中自動(dòng)完成。七、 如果 A、B 地點(diǎn)間網(wǎng)絡(luò)在很長(zhǎng)時(shí)間內(nèi)仍無(wú)法恢復(fù)正常：1） VVR 停止遠(yuǎn)程數(shù)據(jù)復(fù)制。我們的建議是 VVR 將網(wǎng)絡(luò)故障期間所有數(shù)據(jù)的更改記錄在 SRL。 第 27 頁(yè)4） 如果僅僅是主服務(wù)器數(shù)據(jù)復(fù)制服務(wù)發(fā)生故障，可以不進(jìn)行切換，只需將復(fù)制服務(wù)修復(fù)并正常