【正文】 表示：* 以恢復(fù)點(diǎn)為目標(biāo)(RPO Recovery Point Object）– – 數(shù)據(jù)的完整性(無(wú)數(shù)據(jù)丟失)– – 數(shù)據(jù)的一致性(數(shù)據(jù)正確且可用）以恢復(fù)時(shí)間為目標(biāo)(RTO Recovery Time Object） 第 6 頁(yè)中國(guó)移動(dòng)公司的網(wǎng)管系統(tǒng)結(jié)構(gòu)圖如下：可以看到在移動(dòng) IP 網(wǎng)管系統(tǒng)中，包含著眾多的功能子系統(tǒng)，根據(jù)每個(gè)子系統(tǒng)數(shù)據(jù)變化的頻度以及在整個(gè)網(wǎng)管系統(tǒng)中所起到的作用，我們?yōu)槊總€(gè)子系統(tǒng)制定了符合各自特色的 RPO 和 RTO。 第 7 頁(yè)在移動(dòng)公司現(xiàn)有的業(yè)務(wù)系統(tǒng)中，僅考慮本地高可用性,即通過(guò)集群的雙機(jī)系統(tǒng)(Cluster 或 HA)對(duì)業(yè)務(wù)應(yīng)用提供保護(hù)，在一臺(tái)服務(wù)器的軟硬件發(fā)生故障時(shí)，將整個(gè)業(yè)務(wù)切換到后備服務(wù)器上。該方法很大程度上避免了服務(wù)器的單點(diǎn)故障，提高了整個(gè)業(yè)務(wù)系統(tǒng)的可用性。但是，隨著業(yè)務(wù)系統(tǒng)的發(fā)展，隨著競(jìng)爭(zhēng)的不斷加劇，在一些重要的系統(tǒng)中，客戶已經(jīng)不滿足于簡(jiǎn)單的本地保護(hù)。越來(lái)越多的客戶提出了要求更高的系統(tǒng)可用性，要求實(shí)現(xiàn)真正的異地容災(zāi)保護(hù)。因?yàn)橐坏┏霈F(xiàn)異常情況，如火災(zāi)、爆炸、地震、水災(zāi)、雷擊或某個(gè)方向線路故障等自然原因以及電源機(jī)器故障、人為破壞等非自然原因引起的災(zāi)難，導(dǎo)致業(yè)務(wù)正常無(wú)法進(jìn)行和重要數(shù)據(jù)的丟失、破壞，造成的損失將不可估量。因此，要求業(yè)務(wù)系統(tǒng)可以在發(fā)生上述災(zāi)難時(shí)快速恢復(fù)，將損失降到最低點(diǎn)。全面的異地容災(zāi)保護(hù)方案，意味著除了要實(shí)現(xiàn)本地的切換保護(hù)外，更要實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)異地復(fù)制和業(yè)務(wù)系統(tǒng)（包括數(shù)據(jù)庫(kù)和應(yīng)用軟件）的實(shí)時(shí)遠(yuǎn)程切換。 第 8 頁(yè)2 高可用容災(zāi)方案設(shè)計(jì) 設(shè)計(jì)原則我們?yōu)橐苿?dòng)公司綜合結(jié)算提供的高可用容災(zāi)方案的設(shè)計(jì)原則如下：? 方案當(dāng)前即可實(shí)施? 在滿足要求的前提下盡量簡(jiǎn)單? 除特別必要，不需要增加另外超出本方案的軟硬件? 如果一個(gè)軟件產(chǎn)品可以實(shí)現(xiàn)需要的功能，我們不會(huì)再使用另外的產(chǎn)品實(shí)現(xiàn)重復(fù)的功能? 同一方案適合多種平臺(tái)環(huán)境，降低安裝、管理和維護(hù)的難度。VERITAS 的容災(zāi)方案是一個(gè)完整的方案，該方案包括 5 個(gè)功能：主節(jié)點(diǎn)主機(jī)系統(tǒng)在異地的備份和恢復(fù)（即 IT 系統(tǒng)重構(gòu)和業(yè)務(wù)接管）、主節(jié)點(diǎn)業(yè)務(wù)數(shù)據(jù)在異地的備份及恢復(fù)（即生產(chǎn)數(shù)據(jù)的備份和恢復(fù)）、主節(jié)點(diǎn)到災(zāi)備節(jié)點(diǎn)的數(shù)據(jù)遠(yuǎn)程實(shí)時(shí)復(fù)制、本地應(yīng)用服務(wù)和數(shù)據(jù)復(fù)制服務(wù)的切換保護(hù)、應(yīng)用遠(yuǎn)程容災(zāi)切換。涉及的產(chǎn)品包括 Netbackup Enterprise Server、Bare Metal Restore 、Volume Manager+Volume Replicator, VERITAS Cluster Server 和 Global Cluster Manager。 該方案涵蓋了容災(zāi)恢復(fù)的 7 個(gè)層次，為整個(gè)業(yè)務(wù)系統(tǒng)提供全面的保護(hù)，其對(duì)應(yīng)需求分析的系統(tǒng)和各子系統(tǒng)的 RPO/RTO 如下： 第 9 頁(yè)在該整體方案中中，上層依賴于它的下層，每一層的產(chǎn)品實(shí)現(xiàn)相應(yīng)的功能。 圖中涉及的軟件產(chǎn)品將在下面論述。 方案概述針對(duì) IP 網(wǎng)管系統(tǒng)及各子系統(tǒng)實(shí)際分析得出的 RPO/RTO，我們分別采用不同的技術(shù)手段對(duì)其實(shí)現(xiàn)高可用保護(hù)。1． IPNET 流量管理服務(wù)器及 NetCool 匯總管理服務(wù)器該系統(tǒng)屬于核心業(yè)務(wù)系統(tǒng)，數(shù)據(jù)更新率極高，且要求在災(zāi)害發(fā)生時(shí)必須立即投入備份節(jié)點(diǎn)以維持業(yè)務(wù)的連續(xù)性，因此，我們?cè)跀?shù)據(jù)層采用 Volume Replicator 進(jìn)行實(shí)時(shí)的遠(yuǎn)程數(shù)據(jù)復(fù)制；在應(yīng)用層采用 Cluster Server 和Global Cluster Server 進(jìn)行實(shí)時(shí)業(yè)務(wù)級(jí)切換。同時(shí)，為保證不可預(yù)見(jiàn)的意外事件不對(duì)業(yè)務(wù)系統(tǒng)造成不可恢復(fù)的影響，我們還建議利用 Netbackup Enterprise Server 和 Bare Metal Restore 技術(shù)，利用磁帶和磁盤(pán)介質(zhì)在容災(zāi)節(jié)點(diǎn)保留一份生產(chǎn)系統(tǒng)每天的原始數(shù)據(jù)。2． NetCool 網(wǎng)管服務(wù)器 /PM 服務(wù)器、業(yè)務(wù)網(wǎng)管服務(wù)器、 Precision 服務(wù)器該系統(tǒng)屬于業(yè)務(wù)管理系統(tǒng)，直接關(guān)系到管理人員能否順利地進(jìn)行網(wǎng)絡(luò)日常的管理和維護(hù)，并關(guān)系到 IP 業(yè)務(wù)的正常運(yùn)行，因此需要及時(shí)在容災(zāi)節(jié)點(diǎn)實(shí)現(xiàn)接管，但該業(yè)務(wù)子系統(tǒng)的數(shù)據(jù)更新率并不高，而且周期性比較強(qiáng)，因此沒(méi)有必要花費(fèi)高昂的代價(jià)進(jìn)行實(shí)時(shí)的數(shù)據(jù)復(fù)制，可以采用主節(jié)點(diǎn)數(shù)據(jù)備份，容災(zāi)節(jié) 第 10 頁(yè)點(diǎn)異地?cái)?shù)據(jù)恢復(fù)的手段保證數(shù)據(jù)的完整性和一致性。我們建議在應(yīng)用層面上，本地節(jié)點(diǎn)利用 Cluster Server 實(shí)施主機(jī)高可用性，防止主機(jī)故障，容災(zāi)節(jié)點(diǎn)利用 Global Cluster Server 實(shí)施遠(yuǎn)程應(yīng)用切換。在數(shù)據(jù)層面上，利用 Netbackup Enterprise Server 和 Bare Metal Restore 技術(shù)，在本地先形成一套主機(jī)系統(tǒng)和業(yè)務(wù)數(shù)據(jù)的磁盤(pán)備份，并每隔 8 小時(shí)在后臺(tái)將本地備份數(shù)據(jù)復(fù)制到遠(yuǎn)程容災(zāi)節(jié)點(diǎn)（周期復(fù)制），異地節(jié)點(diǎn)恢復(fù)主節(jié)點(diǎn)數(shù)據(jù)，以實(shí)現(xiàn)主備節(jié)點(diǎn)的數(shù)據(jù)同步。3． Visionary 應(yīng)用服務(wù)器、 NetCool 報(bào)表服務(wù)器、 IPNET 報(bào)表服務(wù)器該系統(tǒng)屬于整個(gè)網(wǎng)管系統(tǒng)的報(bào)表系統(tǒng)，數(shù)據(jù)變化量的頻率相對(duì)較低，保留每天的數(shù)據(jù)即可，因此可以考慮底層數(shù)據(jù)備份，業(yè)務(wù)層手工或腳本切換的方式實(shí)現(xiàn)系統(tǒng)可用性，我們建議利用 Netbackup Enterprise Server 和 Bare Metal Restore 技術(shù)，利用磁帶和磁盤(pán)介質(zhì)在容災(zāi)節(jié)點(diǎn)保留一份生產(chǎn)系統(tǒng)每天的原始數(shù)據(jù)。4． 整個(gè)網(wǎng)管系統(tǒng)的歷史數(shù)據(jù)為了保證在任何不可預(yù)見(jiàn)的情況下都能正常維護(hù)整個(gè) IP 業(yè)務(wù)網(wǎng)絡(luò)，我們還建議在主節(jié)點(diǎn)和災(zāi)備節(jié)點(diǎn)利用 Netbackup Enterprise Server 在磁帶上至少保持 6 個(gè)月內(nèi)的系統(tǒng)歷史數(shù)據(jù)。 IPNET 流量管理服務(wù)器及 NetCool 匯總管理服務(wù)器“N+1” 冗余備份方式對(duì)于該子系統(tǒng)，VERITAS 解決方案能夠按照現(xiàn)業(yè)務(wù)系統(tǒng)的要求實(shí)現(xiàn)多種容災(zāi)模型。即:? “1+1”冗余備份方式? “N+1”備份方式? N 節(jié)點(diǎn)循環(huán)備份方式(如果只要求 N=2,即雙地點(diǎn)互為備份)第一種方式實(shí)際是第二種方式 N=1 時(shí)的特殊情況，以下不單獨(dú)討論。 第 11 頁(yè) “N+1” 冗余備份方式為 N 個(gè)正在運(yùn)行的移動(dòng)公司 IP 業(yè)務(wù)系統(tǒng)建立一套遠(yuǎn)程容災(zāi)備份系統(tǒng)，稱為“N+1”備份方式。這種方式下， N 個(gè)正在運(yùn)行的業(yè)務(wù)系統(tǒng)中的任何數(shù)據(jù)的更改，包括靜態(tài)數(shù)據(jù)更改與動(dòng)態(tài)數(shù)據(jù)更改，都必須同步到備用系統(tǒng)中。備用系統(tǒng)中存儲(chǔ)著所有的 N 套正在運(yùn)行的業(yè)務(wù)系統(tǒng)的數(shù)據(jù)總和。正在運(yùn)行的其中一個(gè)系統(tǒng)發(fā)生故障，則備用系統(tǒng)使用對(duì)應(yīng)當(dāng)前故障系統(tǒng)的用戶數(shù)據(jù)和相應(yīng)應(yīng)用，來(lái)接管故障系統(tǒng)的業(yè)務(wù)。若正在運(yùn)行的 N 個(gè)業(yè)務(wù)系統(tǒng)中所有系統(tǒng)同時(shí)發(fā)生故障，則備用系統(tǒng)使用的所有對(duì)應(yīng)故障系統(tǒng)的備份數(shù)據(jù)和相應(yīng)應(yīng)用，接管所有業(yè)務(wù)系統(tǒng)。“N+1”備份方式的優(yōu)點(diǎn)是建設(shè)成本比較低，可以使用一套備份系統(tǒng)為多個(gè)系統(tǒng)提供容災(zāi)備份的功能，平時(shí)設(shè)備利用率比較高。“N+1”備份方式的缺點(diǎn)是當(dāng)多個(gè)系統(tǒng)同時(shí)發(fā)生故障，如果只有一套備份系統(tǒng)為所有用戶提供服務(wù)，可能導(dǎo)致服務(wù)質(zhì)量的下降。該方式建議備份系統(tǒng)使用較高的硬件配置。 “N+1”系統(tǒng)簡(jiǎn)單示意圖如下圖（圖二）： N 節(jié)點(diǎn)循環(huán)備份方式 由于只要求 N=2，實(shí)為一對(duì)一互為備份。...數(shù)據(jù)傳輸方向圖二 多對(duì)一備份Site 1 Site nSite n+1Site 2 第 12 頁(yè)Site A 運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site B 業(yè)務(wù)系統(tǒng)的備份系統(tǒng)；同理，Site B 運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site A 的備份系統(tǒng)。正常情況下，Site B擁有本身業(yè)務(wù)的應(yīng)用、數(shù)據(jù)庫(kù)進(jìn)程和相關(guān)的數(shù)據(jù)，同時(shí)，Site B 系統(tǒng)中有相應(yīng)的數(shù)據(jù)區(qū)存儲(chǔ)從 Site A 實(shí)時(shí)復(fù)制來(lái)的數(shù)據(jù)。而且 Site B 實(shí)時(shí)將數(shù)據(jù)復(fù)制到 Site A。當(dāng)Site A 發(fā)生災(zāi)難時(shí)，Site B 除了提供本身業(yè)務(wù)外，還要提供 Site A 的相應(yīng)服務(wù)。反之同理。N 節(jié)點(diǎn)（N=2）循環(huán)備份系統(tǒng)簡(jiǎn)單示意圖如下圖（圖三）： 軟件安裝在兩種情況下，每個(gè)地點(diǎn)的每臺(tái)服務(wù)器上安裝的軟件相同，只是不同情況下配置方法不同，每臺(tái)服務(wù)器的具體配置方法后面討論。每臺(tái)服務(wù)器安裝軟件如下： 1) 安裝 VERITAS Volume Manager(VxVM) 2) 安裝 VERITAS File System(VxFS) 3) 安裝 VERITAS Volume Replicator(VVR) 4) 安裝 VERITAS Cluster Server(VCS)、相應(yīng)的數(shù)據(jù)庫(kù)代理 (Agent)和應(yīng)用軟件代理5) 安裝 VERITAS Global Cluster Manager(GCM) NetCool 網(wǎng)管服務(wù)器/PM 服務(wù)器、業(yè)務(wù)網(wǎng)管服務(wù)器、Precision 服務(wù)器容災(zāi)該系統(tǒng)在遠(yuǎn)程的應(yīng)用切換層面上和前述方案一樣，不同的是在數(shù)據(jù)復(fù)制的方法數(shù)據(jù)傳輸方向圖三 相互備份Site A Site B 第 13 頁(yè)上，我們利用了 Netbackup 實(shí)現(xiàn)數(shù)據(jù)的周期性復(fù)制NetBackup 是 VERITAS 公司的備份管理軟件 , 它致力于解決網(wǎng)絡(luò)上大、中、小型服務(wù)器和工作站系統(tǒng)上的數(shù)據(jù)備份、歸檔及災(zāi)難恢復(fù)問(wèn)題，Veritas 備份產(chǎn)品國(guó)際市場(chǎng)份額 2022 年為 %，2022 年為 %, 2022 年為 %, 下圖為 Garner Group 統(tǒng)計(jì)的 VERITAS 備份產(chǎn)品 2022 年國(guó)際市場(chǎng)份額：它的突出特點(diǎn)主要有：管理簡(jiǎn)單采用統(tǒng)一的 Java 或 GUI 圖形界面，管理輕而易舉，使用先進(jìn)的人工管理界面工具，制定備份策略、介質(zhì)管理策略，對(duì)各項(xiàng)備份作業(yè)進(jìn)行監(jiān)控。Netbackup 提供了遠(yuǎn)程分發(fā)式安裝工具，當(dāng)用戶擁有眾多的客戶機(jī)，無(wú)需占用大量人力進(jìn)行分散的安裝，只需通過(guò) server 進(jìn)行遠(yuǎn)程分發(fā)軟件安裝。裸金屬恢復(fù) BMR(Bare Metal Restore) 對(duì)于系統(tǒng)中的 HPUX, IBM AIX, Microsoft Windows NT/2022 和 Sun Solaris 等不同操作系統(tǒng)環(huán)境，我們通過(guò) VERITAS Bare Metal Restore（裸機(jī)恢復(fù)）功能，來(lái)簡(jiǎn)化服務(wù)器的恢復(fù)過(guò)程，以完成系統(tǒng)的快速災(zāi)難恢復(fù)。這樣，當(dāng)系統(tǒng)數(shù)據(jù)完全丟失時(shí)，系統(tǒng)管理員可以僅僅通過(guò)一個(gè)啟動(dòng)命令就可以進(jìn)行系統(tǒng)數(shù)據(jù)的完整恢復(fù)，不必進(jìn)行通過(guò)光盤(pán)進(jìn)行操作系統(tǒng)重新安裝，硬盤(pán)重新分區(qū)，IP 地址重新設(shè)置，以及備份軟件重新安裝等復(fù)雜的步驟。數(shù)據(jù)恢復(fù)重定向在數(shù)據(jù)恢復(fù)的過(guò)程中，我們可以通過(guò)授權(quán)，進(jìn)一步讓系統(tǒng)管理員選擇數(shù)據(jù)恢復(fù)的目標(biāo)客戶機(jī)。這樣，我們可以災(zāi)備系統(tǒng)上恢復(fù)所需要的數(shù)據(jù)，保證數(shù)據(jù)的可操作性。并行處理NetBackup 可以實(shí)現(xiàn)多磁帶機(jī)并行操作,因此可以有效地增加帶寬。如果數(shù)據(jù)被并行定位（colocated）到多盤(pán)磁帶上,執(zhí)行選擇性恢復(fù)的過(guò)程將會(huì)很快。NetBackup 可以通過(guò)策略共享實(shí)現(xiàn)多作業(yè)復(fù)用(Multiplex)磁帶，從而大大加快了備份進(jìn)度，減少了磁帶操作過(guò)程的開(kāi)銷。這一提高是顯而易見(jiàn)的。真正映象恢復(fù)(True Image Recovery ）使用全備份和增量備份后,恢復(fù)時(shí)根據(jù)映象(image)恢復(fù),真正做到已刪除文件無(wú)需恢復(fù),再進(jìn)行增量恢復(fù)和文件刪除。 第 14 頁(yè)磁帶多重拷貝 (Inline Tape Copy, Duplicate)磁帶在線復(fù)制 Inline Tape Copy 允許用戶在執(zhí)行備份期間，創(chuàng)建備份數(shù)據(jù)的多份拷貝。復(fù)制允許備份完成后復(fù)制多份備份數(shù)據(jù)。Netbackup 可以一次備份或復(fù)制 24份拷貝，管理多達(dá)同一備份的 10 份拷貝，并且每份拷貝有自己的保護(hù)周期提供災(zāi)難恢復(fù)能力VAULT在多個(gè)地點(diǎn)保存?zhèn)浞莼驈?fù)制介質(zhì)，保證當(dāng)發(fā)生災(zāi)難時(shí)或多個(gè)的地點(diǎn)快速恢復(fù)關(guān)鍵的數(shù)據(jù)。 功能配置說(shuō)明NetBackup Server：備份系統(tǒng)的核心，該服務(wù)器既是主備份服務(wù)器可以對(duì)整個(gè)備份系統(tǒng)進(jìn)行監(jiān)控和管理，備份環(huán)境的核心數(shù)據(jù)應(yīng)用庫(kù)、備份策略和設(shè)備配置均存放在這臺(tái)服務(wù)器上，又是介質(zhì)服務(wù)器，可以直接連接并執(zhí)行自動(dòng)化管理磁帶庫(kù)及其介質(zhì)。由于生產(chǎn)和測(cè)試網(wǎng)在物理上是隔開(kāi)的，所以需要分別安裝兩套備份服務(wù)器。這樣可以使生產(chǎn)和容災(zāi)的備份完全獨(dú)立，但生產(chǎn)數(shù)據(jù)可以通過(guò)兩臺(tái)磁帶庫(kù)實(shí)現(xiàn)異地保留。? NBU Client: SNA 服務(wù)器和測(cè)試網(wǎng)的服務(wù)器的備份方式采用網(wǎng)絡(luò)備份的方式。? Bare Metal Restore：所有服務(wù)器實(shí)現(xiàn)裸機(jī)恢復(fù)。具備“一鍵”恢復(fù)系統(tǒng)的功能，減少數(shù)據(jù)恢復(fù)的復(fù)雜度和時(shí)間。? 可以采用 Netbackup 復(fù)制方式或者采用制定兩個(gè)