【正文】 并強(qiáng)行接管數(shù)據(jù)和網(wǎng)絡(luò)系統(tǒng)，這種情況在技術(shù)領(lǐng)域我們稱為“SplitBrain”，也就是說一份數(shù)據(jù)，兩個(gè)大腦。這種情況對(duì)數(shù)據(jù)系統(tǒng)是非常危險(xiǎn)的，兩個(gè)服務(wù)器對(duì)一個(gè)數(shù)據(jù)資源的強(qiáng)制爭用，會(huì)導(dǎo)致業(yè)務(wù)數(shù)據(jù)的不一致，更有甚者，會(huì)導(dǎo)致業(yè)務(wù)數(shù)據(jù)的不可逆損壞。一個(gè)“假災(zāi)難”會(huì)引起“真災(zāi)難”的發(fā)生，這是誰都不會(huì)允許的。 除非我們有足夠可靠的心跳安全技術(shù)和策略，否則，為了避免這種“意外災(zāi)難”的發(fā)生，我們都會(huì)建議在災(zāi)備系統(tǒng)的接管策略上，采用“災(zāi)難人工確認(rèn)”原則的。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 25 頁 共 41 頁 這里，我想補(bǔ)充說明一下，實(shí)際上，我們推薦的 VERITAS Cluster Server 可以提供其他特有的技術(shù)手段來彌補(bǔ)遠(yuǎn)距離心跳安全性方面的缺陷，嚴(yán)格來講，VCS 可以支持容災(zāi)系統(tǒng)的遠(yuǎn)程自動(dòng)切換。通過配置 I/O fencing 仲裁盤方式可以規(guī)避由于心跳原因造成的“裂腦”現(xiàn)象。但是我們?cè)瓌t上還是建議異地應(yīng)用容災(zāi)采用“災(zāi)難人工確認(rèn)”原則。 建 立 一 個(gè) 滿 足 災(zāi) 備 需 要 的 集 群 系 統(tǒng) 現(xiàn)在新的技術(shù)需求出現(xiàn)了，因?yàn)槲覀冃枰獦?gòu)建這樣一個(gè)集群系統(tǒng)：1． 一個(gè)集群系統(tǒng)，覆蓋一個(gè)應(yīng)用相關(guān)的所有服務(wù)器系統(tǒng)，不僅僅包括生產(chǎn)中心的系統(tǒng)，還需要包括災(zāi)備中心的備用系統(tǒng)。2． 一個(gè)應(yīng)用的集群系統(tǒng)內(nèi)，生產(chǎn)中心內(nèi)的服務(wù)器節(jié)點(diǎn)間是可以自由切換的，并且是需要自動(dòng)切換的，而生產(chǎn)中心到災(zāi)備中心的節(jié)點(diǎn)的切換卻是不允許自動(dòng)發(fā)生的。 我們知道，要統(tǒng)一管理生產(chǎn)中心和災(zāi)備中心的系統(tǒng)，我們必須將同一應(yīng)用的不同服務(wù)器同時(shí)納入同一個(gè)集群系統(tǒng)，如下圖。 在集群邏輯上，我們要求這 3 臺(tái)服務(wù)器同時(shí)屬于同一個(gè)應(yīng)用的集群系統(tǒng)，任意對(duì)這個(gè)應(yīng)用集群的調(diào)整，其配置信息都將同步的傳遞到這 3 臺(tái)服務(wù)器上，同時(shí)，這 3 臺(tái)服務(wù)器作為集群節(jié)點(diǎn)，都處于 Enable 狀態(tài)，都在監(jiān)視彼此的活動(dòng)狀態(tài)，并及時(shí)把配置和狀態(tài)信息的變化傳遞給集群內(nèi)部的其他服務(wù)器系統(tǒng)。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 26 頁 共 41 頁 但是從應(yīng)用邏輯上來看，我們對(duì)這 3 臺(tái)服務(wù)器的角色要求還是有區(qū)別的，我們要求生產(chǎn)中心的服務(wù)器 A 和 B 之間是允許并要求支持自動(dòng)切換的，而容災(zāi)中心的服務(wù)器 C，是不允許自動(dòng)接管生產(chǎn)中心的業(yè)務(wù)的。 我們要求服務(wù)器節(jié)點(diǎn) C 對(duì)業(yè)務(wù)的接管，需要經(jīng)過人工確認(rèn)，然后我們利用在服務(wù)器節(jié)點(diǎn) C 上的接管定義，實(shí)現(xiàn)應(yīng)用的單鍵切換。這種要求需要服務(wù)器節(jié)點(diǎn) C 的各種資源配置始終和生產(chǎn)中心的服務(wù)器節(jié)點(diǎn) A 和 B 保持一致。這樣，相對(duì)于純手工切換，我們推薦的這種方式要平滑的多，并可以更好的保證災(zāi)備系統(tǒng)在計(jì)劃的時(shí)間內(nèi)順利投入運(yùn)行。 本方案推薦的 VERITAS Cluster Server 軟件可以全面地提供這方面的技術(shù)，滿足這種策略的需要，從而可以幫助建立覆蓋生產(chǎn)中心和災(zāi)備中心的統(tǒng)一的集群系統(tǒng)。 業(yè) 務(wù) 系 統(tǒng) 故 障 和 災(zāi) 難 的 響 應(yīng) 業(yè)務(wù)系統(tǒng)故障和災(zāi)難的種類很多，不過我們只要解決了一下幾個(gè)問題，其他的問題就不是問題了，下面，我們就這幾個(gè)問題分別予以闡述。1. 生產(chǎn)中心主業(yè)務(wù)服務(wù)器不可用2. 生產(chǎn)中心所有服務(wù)器不可用3. 生產(chǎn)中心和災(zāi)備中心之間心跳鏈路故障4. 生產(chǎn)中心所有服務(wù)器和磁盤系統(tǒng)不可用同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 27 頁 共 41 頁1)生產(chǎn)中心主業(yè)務(wù)服務(wù)器不可用 生產(chǎn)中心主業(yè)務(wù)服務(wù)器 A 發(fā)生故障，這只是常規(guī)意義上的服務(wù)器單點(diǎn)故障，利用 VCS 集群軟件，我們可以非常簡單的在生產(chǎn)中心內(nèi)部完成應(yīng)用從服務(wù)器 A 到服務(wù)器 B 的自動(dòng)切換。如下圖： 同樣的，在服務(wù)器 A 的故障修復(fù)以后，我們可以繼續(xù)讓應(yīng)用運(yùn)行在服務(wù)器 B 上，而把服務(wù)器 A作為第一備用服務(wù)器；也可以將應(yīng)用回切到服務(wù)器 A，恢復(fù)到故障發(fā)生前的狀態(tài)。2)生產(chǎn)中心所有服務(wù)器不可用 當(dāng)生產(chǎn)中心所有的服務(wù)器系統(tǒng)都發(fā)生故障時(shí)，就遇到了我們所謂的服務(wù)器系統(tǒng)災(zāi)難，這個(gè)時(shí)候，服務(wù)器系統(tǒng) C 發(fā)現(xiàn)服務(wù)器 A、B 均出現(xiàn)了問題，于是做好的了接管應(yīng)用的準(zhǔn)備，但是根據(jù)預(yù)先定義的規(guī)則，服務(wù)器 C 不會(huì)自動(dòng)接管該應(yīng)用，而是等我們?nèi)斯ご_認(rèn)災(zāi)難的真實(shí)性后，由管理員連接到服務(wù)器 C 的集群系統(tǒng)上，啟動(dòng)接管流程。集群軟件會(huì)根據(jù)我們?cè)诩很浖卸x好的接管流程，依次啟動(dòng)該應(yīng)用需要的系統(tǒng)資源、存儲(chǔ)資源、網(wǎng)絡(luò)資源、數(shù)據(jù)庫和應(yīng)用資源，實(shí)現(xiàn)應(yīng)用的平滑接管。整個(gè)應(yīng)用接管的過程如下圖：同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 28 頁 共 41 頁3)生產(chǎn)中心和災(zāi)備中心之間心跳鏈路故障 當(dāng)生產(chǎn)中心和災(zāi)備中心之間所有的心跳鏈路同時(shí)發(fā)生故障時(shí)，生產(chǎn)中心會(huì)認(rèn)為災(zāi)備中心的服務(wù)器 C 發(fā)生故障，并將該服務(wù)器 C 從集群中隔離出去，整個(gè)過程對(duì)應(yīng)用系統(tǒng)沒有任何影響，之后，我們?cè)谏a(chǎn)中心仍然保持一個(gè)由服務(wù)器 A 和服務(wù)器 B 構(gòu)成的集群。 與此同時(shí)，在災(zāi)備中心，災(zāi)備服務(wù)器同樣會(huì)認(rèn)為生產(chǎn)中心發(fā)生災(zāi)難，從而將服務(wù)器 A 和服務(wù)器B 從集群中隔離，保留自身構(gòu)成單節(jié)點(diǎn)集群。由于我們預(yù)先定義的策略是災(zāi)備系統(tǒng)不自動(dòng)接管業(yè)務(wù)，所以災(zāi)備系統(tǒng)不會(huì)試圖接管任何和業(yè)務(wù)相關(guān)的系統(tǒng)資源。在人工確認(rèn)以后，我們發(fā)現(xiàn)這是由心跳鏈路故障引起的“假災(zāi)難” ，于是我們可以 Disable 災(zāi)備中心的集群系統(tǒng)，并設(shè)法修復(fù)心跳鏈路，然后，我們可以再將災(zāi)備中心的服務(wù)器 C 重新加入到由服務(wù)器 A 和 B 構(gòu)成的集群中去。 VERITAS Cluster Server 支持動(dòng)態(tài)的集群節(jié)點(diǎn)加入，所以，事件的整個(gè)過程對(duì)業(yè)務(wù)系統(tǒng)不會(huì)產(chǎn)生任何影響。相反的，其他我們以前使用的集群軟件，在遇到上述情況后，恢復(fù)該集群新節(jié)點(diǎn)時(shí)是需要暫停應(yīng)用的。4)生產(chǎn)中心所有服務(wù)器和磁盤系統(tǒng)不可用 生產(chǎn)中心所有服務(wù)器和磁盤系統(tǒng)不可用，這種情況一般只有在真正的災(zāi)難的情況下才會(huì)發(fā)生，同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 29 頁 共 41 頁包括自然災(zāi)難和人為災(zāi)難。這種情況下，我們需要災(zāi)備系統(tǒng)在確認(rèn)災(zāi)難以后，能夠快速的、準(zhǔn)確地接管所有關(guān)鍵業(yè)務(wù)系統(tǒng)。 這種故障和上面第一種情況的不同之處在于，生產(chǎn)中心的磁盤系統(tǒng)同時(shí)發(fā)生了故障。這種情況會(huì)帶來一個(gè)新問題，那就是在一個(gè)邏輯卷鏡像的一個(gè) Plex 損壞的情況下，我們需要將該邏輯卷所在的 Disk Group 強(qiáng)制 Import，這種處理方式和磁盤系統(tǒng)沒有損壞的情況是不同的，對(duì)于手動(dòng)處理，我們需要制動(dòng)不同的接管命令流程，而對(duì)于集群系統(tǒng)，我們則需要集群系統(tǒng)提供針對(duì)這個(gè)問題的監(jiān)控、判斷的能力，以及選擇合適啟動(dòng)流程的能力。 針對(duì)這種情況，VERITAS Cluster Server 提供的 Campus Agent 可以幫助用戶簡化災(zāi)備系統(tǒng)管理程序和災(zāi)難恢復(fù)程序。VCS Campus Agent 提供了一系列針對(duì)城域集群系統(tǒng)的解決方案，利用 VCS Campus Agent，我們可以非常輕松的構(gòu)建一個(gè)覆蓋災(zāi)備系統(tǒng)的集群系統(tǒng)。下圖是在生產(chǎn)中心發(fā)生災(zāi)難的情況下，災(zāi)備系統(tǒng)的接管流程的示意圖：同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 30 頁 共 41 頁 方 案 的 優(yōu) 勢 我們推薦的城域集群方案，為構(gòu)建穩(wěn)定的、可靠的、易于管理的災(zāi)備中心非常有幫助，該方案的優(yōu)勢主要表現(xiàn)在以下幾個(gè)方面：1． 有利于保證生產(chǎn)中心和災(zāi)備中心資源配置的一致性2． 有利于簡化災(zāi)備中心災(zāi)難應(yīng)急的流程，保證災(zāi)備中心快速、順利的接管相應(yīng)的應(yīng)用系統(tǒng)。3． 方案在技術(shù)上支持遠(yuǎn)程心跳，可將集群擴(kuò)展到城域范圍。4． 方案擁有先進(jìn)的 Campus Agent，解決城域集群特有的問題。5． 方案支持靈活的集群策略，滿足災(zāi)備中心管理的各種需要。比如自動(dòng)接管和手動(dòng)接管并存這種集群模式。6． 圖形化管理，簡單直觀，減輕管理壓力，減少集群系統(tǒng)認(rèn)為事故。7． 方案支持應(yīng)用級(jí)的監(jiān)控和集群管理。相對(duì)于 HACMP 僅僅提供硬件級(jí)的故障監(jiān)控，VCS 可以提供應(yīng)用級(jí)的生命監(jiān)控，不僅能在硬件系統(tǒng)發(fā)生故障時(shí)，及時(shí)檢測并切換主機(jī)，還能判斷象數(shù)據(jù)庫進(jìn)程掛起這樣的應(yīng)用級(jí)別的軟故障，并針對(duì)這些故障，提供快速的處理，包括應(yīng)用重啟或應(yīng)用切換。8． 支持多平臺(tái)，簡化管理，降低管理成本VERITAS Cluster Server 支持包括 IBM AIX，SUN Solaris，HPUX 等在內(nèi)的多種通用的開放平臺(tái)，也支持 Linux 和 Windows 平臺(tái)，不管是現(xiàn)在，還是將來，將集群平臺(tái)集中到 VCS，可以大大簡化我們的日常集群管理工作。我們的技術(shù)人員不必再需要針對(duì)每一種平臺(tái)，學(xué)習(xí)不同的集群軟件管理和問題診斷的方法；我們企業(yè)，也不再需要針對(duì)每一種平臺(tái)，都花錢培養(yǎng)相應(yīng)的集群軟件管理員了。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 31 頁 共 41 頁五 、 VERITAS Cluster Server 簡 介 業(yè) 界 領(lǐng) 先 的 高 可 用 應(yīng) 用 解 決 方 案 VERITAS Cluster Server?是業(yè)界領(lǐng)先的開放式系統(tǒng)集群解決方案，是消除計(jì)劃內(nèi)和計(jì)劃外停機(jī)時(shí)間，簡化服務(wù)器合并，并有效管理多平臺(tái)環(huán)境內(nèi)廣泛應(yīng)用的理想選擇。 要保障信息訪問，應(yīng)用和數(shù)據(jù)就必須符合嚴(yán)格的正常運(yùn)行要求。鑒于用戶需要以電子方式獲取更多的服務(wù)，提升應(yīng)用正常運(yùn)行水平的需求也急劇增長。VERITAS Cluster Server 支持 UNIX 和Windows 集群內(nèi)最廣泛的應(yīng)用程序，為配置基于策略的故障切換方案，滿足正常運(yùn)行要求和履行為客戶承擔(dān)的義務(wù)提供了靈活性。除此之外，自動(dòng)化、智能化工作負(fù)荷管理，允許集群管理員從反應(yīng)型恢復(fù)轉(zhuǎn)向瞻型可用性管理，從而優(yōu)化利用各種資源。 由于支持存儲(chǔ)局域網(wǎng)（SAN）和傳統(tǒng)客戶機(jī)/服務(wù)器環(huán)境內(nèi)的大型集群，VERITAS Cluster Server 能夠在網(wǎng)絡(luò)存儲(chǔ)環(huán)境，靈活地保護(hù)從單一數(shù)據(jù)庫實(shí)例到大型多應(yīng)用集群的所有部件。它既能夠獨(dú)立使用，又能與許多成龍配套的 VERITAS 軟件解決方案相整合，因此在為當(dāng)今的混合型計(jì)算環(huán)境提供高可用性和災(zāi)難恢復(fù)方面，發(fā)揮至關(guān)重要的作用。 Cluster Server 產(chǎn) 品 要 點(diǎn)? 多平臺(tái)支持VERITAS Cluster Server 支持 Microsoft Windows、Sun、Solaris、HPUX 和 IBM AIX。? 簡化管理可以選用基于 Web 或基于 Java 的直觀控制臺(tái)，在整個(gè)站點(diǎn)范圍監(jiān)控多達(dá) 16 個(gè)多平臺(tái)集群，并使用基于 Java 的接口執(zhí)行細(xì)顆粒度集群管理。如果與 VERITAS Global Cluster Manager?相整合，就能夠在不同地區(qū)站點(diǎn)間或全球范圍內(nèi)，為單一站點(diǎn)的 256 個(gè)集群提供監(jiān)控和遷移。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 32 頁 共 41 頁? 廣泛的應(yīng)用支持當(dāng)前支持廣泛系列的應(yīng)用，其中包括 Oracle、Sybase、DBInformix、Microsoft SQL Server 和 Microsoft Exchange，同時(shí) VERITAS 還在連續(xù)不斷地開發(fā)新代理。另外，還提供代理開發(fā)工具箱，以便創(chuàng)建定制代理，這樣就能夠?qū)θ魏螒?yīng)用執(zhí)行監(jiān)控，檢測其故障，并執(zhí)行故障恢復(fù)。? 高度可伸縮支持 SAN 環(huán)境和傳統(tǒng)客戶機(jī)/服務(wù)器環(huán)境內(nèi)的超大規(guī)模集群。而且，VERITAS Cluster Server 還允許根據(jù)需要，靈活地增加或取消集群內(nèi)的服務(wù)器，不需要使集群或應(yīng)用處于離線狀態(tài)。? 多平臺(tái)硬件支持由于通過 VERITAS 集成實(shí)驗(yàn)室（Ilab）執(zhí)行廣泛的互操作測試，因此能夠支持所有的主要第三方存儲(chǔ)器供應(yīng)商和廣泛的多平臺(tái)硬件配置。而且，還為第三方陣列供應(yīng)商提供自認(rèn)證測試。? 智能化工用負(fù)荷管理VERITAS Cluster Server 以智能方式，監(jiān)控和管理系統(tǒng)容量及資源可用性，進(jìn)而以自動(dòng)化方式啟動(dòng)和遷移應(yīng)用服務(wù)。這將通過數(shù)據(jù)中心實(shí)現(xiàn)最佳負(fù)荷分配。? 靈活的故障切換采用容錯(cuò)高可用引擎，支持基于策略的級(jí)聯(lián)型多方向故障切換，因?yàn)樵撘媸褂枚嗉?jí)故障檢測模式。? 先進(jìn)集群通信低延遲傳輸（LLT）和組成員/原子廣播（GAB）特性，為 IP 協(xié)議棧提供高速低延遲更換，以滿足集群通信需求。? 集成化產(chǎn)品套件能夠與其它 VERITAS 存儲(chǔ)管理軟件實(shí)現(xiàn)無縫集成，其中包括 VERITAS Volume Manager?、VERITAS File System?、VERITAS NetBackup?和 VERITAS Volume Replicator?。如果與 VERITAS Global Cluster Manager 相集成。就能夠在全球任何地方，監(jiān)控和遷移資源組、集群或整個(gè)站點(diǎn)。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 33 頁 共 41 頁 Cluster Server 的 先 進(jìn) 性? 顆粒度用戶權(quán)限在應(yīng)用服務(wù)級(jí)，可以為用戶管理 VERITAS Cluster Server 定義各不同的權(quán)限級(jí)別。這樣，用戶將根據(jù)授予的權(quán)限，啟動(dòng)或限制集群操作。每一類用戶都可以根據(jù)他們需要的訪問量，分配特定的權(quán)限。例如，用戶角色包括集群管理員、操作員或客戶。其中，集群管理員擁有最大的權(quán)限，而集群客戶的權(quán)限最小。? 減少培訓(xùn)和配件成本VERITAS Cluster Server 是和體系架構(gòu)相獨(dú)的，它支持 UNIX 與 Windows 平臺(tái)，同時(shí)還支持業(yè)界最廣泛的異構(gòu)硬件配置，其中包括服務(wù)器、存儲(chǔ)器和 SAN 互連設(shè)備?；?Web 或基于 Java 的交叉平臺(tái)公用管理控制臺(tái)，允許 IT 員工管理整個(gè)站點(diǎn)的高可用政策，不需要為每個(gè)平臺(tái)的集群解決方案提供培訓(xùn)。除此之外，由于