【正文】 行數(shù)據(jù)的傳送的進(jìn)一步的災(zāi)難恢復(fù)。 5 層 – 兩個(gè)活動(dòng)的數(shù)據(jù)中心，確保數(shù)據(jù)一致性的兩階段傳輸承諾（ TwoSite TwoPhaseCommit） Tier5 則提供了更好的數(shù)據(jù)完整性和一致性。 需求簡析 對(duì)于 IT 系統(tǒng)的容災(zāi)指標(biāo)，我們可以通過下列參數(shù) 表示： * 以恢復(fù)點(diǎn)為目標(biāo) (RPO Recovery Point Object） – – 數(shù)據(jù)的完整性 (無數(shù)據(jù)丟失 ) – – 數(shù)據(jù)的一致性 (數(shù)據(jù)正確且可用） 以恢復(fù)時(shí)間為目標(biāo) (RTO Recovery Time Object） 第 6 頁 中國移動(dòng)公司的網(wǎng)管系統(tǒng)結(jié)構(gòu)圖如下： 可以看到 在 移動(dòng) IP 網(wǎng)管系統(tǒng)中，包含著眾多的功能子系統(tǒng) ， 根據(jù)每個(gè)子系統(tǒng)數(shù)據(jù)變化的頻度以及在整個(gè)網(wǎng)管系統(tǒng)中所起到的作用，我們?yōu)?每個(gè) 子系統(tǒng)制定了符合各自特色的 RPO 和 RTO。越來越多的客戶提出了要求更高的系統(tǒng)可用性，要求實(shí)現(xiàn)真正的異地容災(zāi)保護(hù)。 第 8 頁 2 高可用容災(zāi)方案設(shè)計(jì) 設(shè)計(jì)原則 我們?yōu)?移動(dòng) 公司綜合結(jié)算提供的高可用容災(zāi)方案的設(shè)計(jì)原則如下： ? 方案當(dāng)前即可實(shí)施 ? 在滿足要求的前提下盡量簡單 ? 除特別必要，不需要增加另外超出本方案的軟硬件 ? 如果一個(gè)軟件產(chǎn)品可以實(shí)現(xiàn)需要的功能，我們不會(huì)再 使用另外的產(chǎn)品實(shí)現(xiàn)重復(fù)的功能 ? 同一方案適合多種平臺(tái)環(huán)境，降低安裝、管理和維護(hù)的難度。 圖中涉及的軟件產(chǎn)品將在下面論述。 2． NetCool 網(wǎng)管服務(wù)器 /PM 服務(wù)器、業(yè)務(wù)網(wǎng)管服務(wù)器、 Precision 服務(wù)器 該系統(tǒng)屬于業(yè)務(wù)管理系統(tǒng)，直接關(guān)系到管理人員能否 順利地進(jìn)行網(wǎng)絡(luò)日常的管理和維護(hù)，并關(guān)系到 IP 業(yè)務(wù)的正常運(yùn)行，因此需要及時(shí)在容災(zāi)節(jié)點(diǎn)實(shí)現(xiàn)接管，但該業(yè)務(wù)子系統(tǒng)的數(shù)據(jù)更新率并不高， 而且周期性比較強(qiáng)， 因此沒有必要花費(fèi)高昂的代價(jià)進(jìn)行實(shí)時(shí)的數(shù)據(jù)復(fù)制，可以采用主節(jié)點(diǎn)數(shù)據(jù)備份，容災(zāi)節(jié) 第 10 頁 點(diǎn)異地?cái)?shù)據(jù)恢復(fù)的手段保證數(shù)據(jù)的完整性和一致性。 4． 整個(gè)網(wǎng)管系統(tǒng)的歷史數(shù)據(jù) 為了保證在任何不可預(yù)見的情況下都能正常 維護(hù)整個(gè) IP 業(yè)務(wù)網(wǎng)絡(luò)，我們還建議 在主節(jié)點(diǎn)和災(zāi)備節(jié)點(diǎn)利用 Netbackup Enterprise Server 在磁帶上至少保持 6 個(gè)月內(nèi)的系統(tǒng)歷史數(shù)據(jù)。這種方式下， N 個(gè)正在運(yùn)行的業(yè)務(wù)系統(tǒng)中的任何數(shù)據(jù)的更改，包括靜態(tài)數(shù)據(jù)更 改與動(dòng)態(tài)數(shù)據(jù)更改，都必須同步到備用系統(tǒng)中。 “ N+1”備份方式的優(yōu)點(diǎn)是建設(shè)成本比較低，可以使用一套備份系統(tǒng)為多個(gè)系統(tǒng)提供容災(zāi)備份的功能，平時(shí)設(shè)備利用率比較高。 Site A運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site B業(yè)務(wù)系統(tǒng)的備份系統(tǒng)；同理，... 數(shù)據(jù)傳輸方向 圖二 多對(duì)一備份 Site 1 Site n Site n+1 Site 2 第 12 頁 Site B運(yùn)行本身業(yè)務(wù)系統(tǒng)的同時(shí)，還作為 Site A的備份系統(tǒng)。反之同理。 裸金屬恢復(fù) BMR(Bare Metal Restore) 對(duì)于系統(tǒng)中的 HPUX, IBM AIX, Microsoft Windows NT/2020 和 Sun Solaris 等不同操作系統(tǒng)環(huán)境，我們通過 VERITAS Bare Metal Restore（裸機(jī)恢復(fù)）功能，來簡化服務(wù)器的恢復(fù)過程，以完成系統(tǒng)的快速災(zāi)難恢復(fù)。 并行處理 NetBackup 可以實(shí)現(xiàn)多磁帶機(jī)并行操作 ,因此可以有效地增加帶寬。 真正映象恢復(fù) (True Image Recovery） 使用全備份和增量備份后 ,恢復(fù)時(shí)根據(jù)映象 (image)恢復(fù) ,真正做到已刪除文件無需恢復(fù) ,大大減少恢復(fù)數(shù)據(jù)量 .傳統(tǒng)方式先恢復(fù)全備份文件 ,再進(jìn)行增量恢復(fù)和文件刪除。 功能配置說明 NetBackup Server： 備份系統(tǒng)的核心，該服務(wù)器既是主備份服務(wù)器可以對(duì)整個(gè)備份系統(tǒng)進(jìn)行監(jiān)控和管理，備份環(huán)境的核心數(shù)據(jù)應(yīng)用庫、備份策略和設(shè)備配置均存放在這臺(tái)服務(wù)器上，又是介質(zhì)服務(wù)器，可以直接連接并執(zhí)行自動(dòng)化管理磁帶庫及其介質(zhì)。 ? Bare Metal Restore： 所有服務(wù)器實(shí)現(xiàn)裸機(jī)恢復(fù)。 ? 利用光纖線路和遠(yuǎn)程磁帶庫實(shí)現(xiàn)了異地的數(shù)據(jù)備份保護(hù)，但在災(zāi)備點(diǎn)如果沒有備份恢復(fù)服務(wù)器，即只保留了數(shù)據(jù)。 以上是為我們 為 業(yè)務(wù) 系統(tǒng) 提供的數(shù)據(jù)備份復(fù)方案，設(shè)計(jì)的目的是采用業(yè)界最先進(jìn)的備份技術(shù)完成對(duì)系統(tǒng)數(shù)據(jù)在線、快速、有效的磁帶備份保護(hù)。此外，磁盤緩沖可以方便備份和恢復(fù)， NetBackup 用戶可以利用磁盤緩沖，為將數(shù)據(jù)傳輸?shù)酱艓峁┍憷苊舛嗦窂?fù)用鏡像的弊端。如果管理員想在磁盤上保存超過一天的數(shù)據(jù)，則應(yīng)對(duì)磁盤空間進(jìn)行調(diào)整。為進(jìn)行此操作， NetBackup 軟件 要使磁盤鏡像失效，將目的存儲(chǔ)設(shè)備上的備份鏡像成為主副本。 在磁盤緩沖的第二階段，將鏡像從磁盤緩沖存儲(chǔ)設(shè)備重新定向到目的存儲(chǔ)設(shè)備。 第三階段是自動(dòng)使磁盤鏡像 失效，使目的存儲(chǔ)設(shè)備上的鏡像成為數(shù)據(jù)的主副本。以往數(shù)據(jù)中心曾是大型機(jī)一統(tǒng)天下，現(xiàn)在則是以大型 UNIX、 Windows 服務(wù)器以及集群為基礎(chǔ)，企業(yè)在此之上構(gòu)建并運(yùn)行和管理關(guān)鍵業(yè)務(wù)應(yīng)用。主備份服務(wù)器擁有一個(gè)或多個(gè)附帶的存儲(chǔ)設(shè)備，可為多臺(tái)客戶端服務(wù)器提供數(shù)據(jù)備份，主備份服務(wù)器也可以構(gòu)成集群以實(shí)現(xiàn)高可用性。如果某臺(tái)介質(zhì)服務(wù)器因故障或其他問題不能正常工作，可將這一臺(tái)介質(zhì)服務(wù)器的備份任務(wù)轉(zhuǎn)移到另一臺(tái)介質(zhì)服務(wù)器上進(jìn)行。 系統(tǒng)災(zāi)難恢復(fù) —— VERITAS Bare Metal Restore 對(duì)于系統(tǒng)中可能存在的 IBM AIX, Sun Solaris， HPUX,等不同操作系統(tǒng)環(huán)境，我們通過 VERITAS Bare Metal Restore（裸機(jī)恢復(fù)）功能，來簡化服務(wù)器的恢復(fù)過程，以完成系統(tǒng)的快速災(zāi)難恢復(fù)。 BMR 服務(wù)器驅(qū)動(dòng)啟動(dòng)服務(wù)器和文件服務(wù)器，使客戶機(jī)自動(dòng)獲得啟動(dòng)鏡像和恢復(fù)計(jì)劃。通過閱讀和理解本章，您將了解 VERITAS 解決方案的實(shí)現(xiàn)方法，并清楚地知道 VERITAS 解決方案是切實(shí)可行的，并且有相關(guān)的實(shí)施案例和實(shí)施經(jīng)驗(yàn)。各個(gè)軟件的功能完全集成在一起，建立一個(gè)容遠(yuǎn)程數(shù)據(jù)復(fù)制、本地容災(zāi)、遠(yuǎn)程應(yīng)用切換于一體的方案。將數(shù)據(jù)（特別是需要進(jìn)行遠(yuǎn)程復(fù)制的相關(guān) 文件系統(tǒng)、數(shù)據(jù)庫）存放在卷上。復(fù)制的數(shù)據(jù)可以是數(shù)據(jù)庫中的數(shù)據(jù)（文件方式或裸設(shè)備方式）和文件。； 2) 將各個(gè)業(yè)務(wù)系統(tǒng)中需要進(jìn)行遠(yuǎn)程復(fù)制的多個(gè)或一個(gè)卷定義為一個(gè) Replicated Volume Group(簡稱 RVG)； 3) 在 Site A定義一條 RLINK，指向 Site B；在 Site B也定義一條指向 Site A 的 RLINK。然后，在Site A定義 RLINK to_c1，指向 Site C；在 Site B定義 RLINK to_c2，指向Site C；在 Site C 定義兩個(gè) RLINK，一個(gè) to_a,指向 Site A,另一個(gè) to_b,指向Site B。 VVR 通過 SRL 保證數(shù)據(jù)復(fù)制嚴(yán)格按照寫順序進(jìn)行，這在異步工作方式下非常重要。 DCM 在正常情況下不使用，在 SRL 滿后記錄變化的數(shù)據(jù)塊的塊號(hào)，當(dāng)恢復(fù)正常復(fù)制后，等SRL 中的數(shù)據(jù)傳送完后，將 DCM 中記錄的塊傳送到異地。 如果數(shù)據(jù)復(fù)制的線路帶寬有限，出于保證本地服務(wù)器讀寫性能的考慮，可以將復(fù)制工作模式定義為異步。在主節(jié)點(diǎn)往后備節(jié)點(diǎn)正常復(fù)制數(shù)據(jù)前，必須逐塊逐塊地將主節(jié)點(diǎn)中需要復(fù)制的數(shù)據(jù)拷貝到后備節(jié)點(diǎn)，也就是說，將雙方的 RVG進(jìn) 行同步。方法很簡單，只要進(jìn)行一步操作即可完成。在備份開始前，在主節(jié)點(diǎn)設(shè)置檢查點(diǎn)，該檢查點(diǎn)記錄在SRL 中，然后將數(shù)據(jù)備份到活動(dòng)硬盤、光盤、磁帶或其它介質(zhì)上。用該方法進(jìn)行數(shù)據(jù)完全同 第 23 頁 步，要求 SRL卷大些，等完成后，再將 SRL卷通過 Volume Manager 在線縮小。反向同步有兩種情況，一種是在災(zāi)難發(fā)生時(shí)刻，原主節(jié)點(diǎn)與災(zāi)備節(jié)點(diǎn)的數(shù)據(jù)是同步的（即無未復(fù)制的數(shù)據(jù)）；第二種是在災(zāi)難發(fā)生時(shí)刻，原主節(jié)點(diǎn)與災(zāi)備節(jié)點(diǎn)的數(shù)據(jù)不是完全同步的（即主節(jié)點(diǎn)有數(shù)據(jù)尚未復(fù)制到災(zāi)備節(jié)點(diǎn)）。傳送完成后，將當(dāng)前主節(jié)點(diǎn)的數(shù)據(jù)庫和應(yīng)用停止，將雙方角色復(fù)原，并在原主節(jié)點(diǎn)提供正常服務(wù)。脫機(jī)處理由打破后備節(jié)點(diǎn)的鏡像卷、對(duì)鏡像數(shù)據(jù)進(jìn)行處理、重鏡像等 幾個(gè)過程組成。當(dāng)主節(jié)點(diǎn)收到第二個(gè)確認(rèn)后，將 SRL 中的相應(yīng)數(shù)據(jù)清空。在本方案中， VCS 主要負(fù)責(zé)以下功能： 1） VCS 負(fù)責(zé)監(jiān)控和管理硬件系統(tǒng) 和操作系統(tǒng)，當(dāng)出現(xiàn)故障時(shí)進(jìn)行切換。這點(diǎn)對(duì)于容災(zāi)系統(tǒng)非常重要。 四、 Global Cluster Server（簡稱 GCM）可以稱為 Cluster’s Cluster（集群的集群）。詳細(xì)的配置命令和配置文件見附錄。創(chuàng)建一個(gè) disk group，包括涉及的磁盤，并在這些磁盤上劃分出需要的卷，包括用于 SRL 的卷。 1) 為需要復(fù)制的卷增加 DCM。 5) 進(jìn)行數(shù)據(jù)復(fù)制。 四、 安裝 GCM。用手工模式進(jìn)行異地容災(zāi)切換測試，并調(diào)優(yōu)化有關(guān)參數(shù)。 一、 正常情況下： 1） 業(yè)務(wù)系統(tǒng)運(yùn)行在地點(diǎn) A，包括數(shù)據(jù)庫實(shí)例 、有關(guān)的文件、數(shù)據(jù)庫數(shù)據(jù)、應(yīng)用軟件。 4） GCM 監(jiān)控兩地 Cluster 系統(tǒng)的運(yùn)行。 4） 如果僅僅是主服務(wù)器數(shù)據(jù)復(fù)制服務(wù)發(fā)生故障，可以不進(jìn)行切換，只需將復(fù)制服務(wù)修復(fù)并正常運(yùn)行。 3） A地點(diǎn)的業(yè)務(wù)將在 B地點(diǎn)正常提供服務(wù)。我們的建議是 VVR 將網(wǎng)絡(luò)故障期間所有數(shù)據(jù)的更改記錄在 SRL。 六、 如果 A、 B地點(diǎn)間網(wǎng)絡(luò)在短時(shí)間內(nèi)恢復(fù)正常。 七、 如果 A、 B地點(diǎn)間網(wǎng)絡(luò)在很長時(shí)間內(nèi)仍無法恢復(fù)正常： 1） VVR 停止遠(yuǎn)程數(shù)據(jù)復(fù)制。數(shù)據(jù)反向復(fù)制時(shí)只復(fù)制災(zāi)難期間變化的數(shù)據(jù)而不是所有的數(shù)據(jù)，這是本方案優(yōu)勢之一。以下過程將在腳本中自動(dòng)完成。也就是說， A 中有一些本地已經(jīng)修改，而 B 還未修改的數(shù)據(jù)。 B 節(jié)點(diǎn)將進(jìn)行判斷，根據(jù)數(shù)據(jù)塊是否有新的修改，對(duì) DCM 進(jìn)行置位。 9） GCM 控制進(jìn)行整個(gè)系統(tǒng)的反向切換。通過分析，說明方案符合需求，并進(jìn)一步講解方案的細(xì)節(jié)。 對(duì)于 VVR 對(duì)數(shù)據(jù)庫內(nèi)容的復(fù)制，就 oracle 為例，有兩種方法： 1）僅復(fù)制 Archive Log 和 Online Redo Log。該方法的優(yōu)點(diǎn)是更好地保持?jǐn)?shù)據(jù)的一致性，而且發(fā)生災(zāi)難時(shí)，后備系統(tǒng)恢 復(fù)正常服務(wù)的時(shí)間較短。例如一般情況下，網(wǎng)絡(luò)故障在 8 小時(shí)內(nèi)修復(fù)，則將 SRL的容量定為 8 小時(shí)內(nèi)數(shù)據(jù)變化量再加上一定的冗余。但在實(shí)際情況中，由于發(fā)生重大災(zāi)難時(shí)業(yè)務(wù)異地切換屬于非常嚴(yán)重的事故，所以我們建議該過程前用戶進(jìn)行電話確認(rèn)，然后在 GCM 界面中按下切換確認(rèn)按鈕進(jìn)行切換。 四、 本方案支持 1+ N+1 和節(jié)點(diǎn)互備方式，滿足用戶的不同需求。 六、 基線建立，需要主備節(jié)點(diǎn)的數(shù)據(jù)完全同步。以我們?cè)谝酝鶎?shí)施中的經(jīng)驗(yàn)，如果采用異步復(fù)制方式，對(duì)整個(gè)系統(tǒng)的影響，在 5%左右。 VERITAS Cluster Server Application Agent 4。 VERITAS Cluster Server 2。 VERITAS BMR 第 35 頁 IPNET 和 NetCool 報(bào)表 服務(wù)器 軟件配置（每節(jié)點(diǎn)） 1。 VERITAS 公司于 1982 年成立于加利福尼亞的 Mountain View，現(xiàn)擁有員工3500 余名，在全球多個(gè)國家設(shè)立分公司或辦事處。為保證提供集成的一攬子軟件存儲(chǔ)管理解決方案，VERITAS Software 與業(yè)界所有大型企業(yè)都建立了戰(zhàn)略合作伙伴關(guān)系。從數(shù)據(jù)產(chǎn)生到數(shù)據(jù)保存的整個(gè)過程中， VERITAS 提供的軟件產(chǎn)品能夠確保系統(tǒng)數(shù)據(jù)存儲(chǔ)的高性能、 高擴(kuò)展性和高可用性。管理涉及各種存儲(chǔ)介質(zhì)，包括磁盤，光盤和磁帶。這些解決方案的核心是 VERITAS 存儲(chǔ)產(chǎn)品 —— VERITAS Volume Manager?和 VERITAS File System。這些工具可確保提供持續(xù)的數(shù)據(jù)可用性、易用性與數(shù)據(jù)保護(hù)。該產(chǎn)品具有可擴(kuò)展的性能與特性，足以滿足客戶機(jī) /服務(wù)器環(huán)境中不斷增強(qiáng)的用戶需求。通過將數(shù)據(jù)映像到快速靈活的存儲(chǔ)器上（如 RAM 驅(qū)動(dòng)器或固定狀態(tài)磁盤）可以加快訪問關(guān)鍵信息的速度。同時(shí)，通過使用冗余技術(shù)提高數(shù)據(jù)可用性，卷管理程序還能夠有效防止磁盤與硬件故障造成的數(shù)據(jù)丟失與崩潰。