【正文】 VERITAS 通過(guò)優(yōu)化集群文件系統(tǒng)來(lái)支持 ODM 以保證最佳的 RAC 使用效率。ODM 可通過(guò)文件系統(tǒng)來(lái)解決效率問(wèn)題，具體方法是通過(guò)簡(jiǎn)化的I/O 函數(shù)架構(gòu)來(lái)替換一系列復(fù)雜的系統(tǒng) I/O 調(diào)用。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 40 頁(yè) 共 41 頁(yè)ODM：是標(biāo)準(zhǔn)的 ORACLE API,用作數(shù)據(jù)庫(kù) IO,ODM 允許直接訪問(wèn)數(shù)據(jù)庫(kù)而無(wú)需通過(guò)文件系統(tǒng)。所有的 Tablespace 都是可見(jiàn)的并且可以在線的進(jìn)行擴(kuò)容。如果一個(gè)節(jié)點(diǎn)失效，其他節(jié)點(diǎn)將繼續(xù)對(duì)外提供服務(wù)。Cluster File System 模塊與集群框架集成在一起以保證所有的系統(tǒng)在訪問(wèn)數(shù)據(jù)時(shí)處于完全協(xié)調(diào)狀態(tài)，不管集群節(jié)點(diǎn)是否處于故障狀態(tài)。同時(shí)能夠提供鏡像，條帶化，動(dòng)態(tài)多路徑，以及在線管理功能。VERITAS Volume Manager 可以使物理存儲(chǔ)變成邏輯設(shè)備并進(jìn)行管理。關(guān)于卷（VOLUME）信息的配置及變化由進(jìn)程 VXCONFIGD 控制。如圖：同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 39 頁(yè) 共 41 頁(yè)CVM 實(shí)際上是 VXVM 的擴(kuò)展，其命令與 VXVM 相同，在集群環(huán)境下，它使所有節(jié)點(diǎn)能迅速識(shí)別磁盤(pán)組（DISKGROUP）和卷(VOLUME)信息。在 RAC 環(huán)境下，每個(gè)節(jié)點(diǎn)數(shù)據(jù)庫(kù)的組件，需要與別的節(jié)點(diǎn)中相同功能的數(shù)據(jù)層通信,如下圖所示：其中各數(shù)據(jù)層的功能為：? RAC INSTANCE:通信協(xié)調(diào)保證 DATABASE 中的數(shù)據(jù)塊? ODM 進(jìn)程：保護(hù)數(shù)據(jù)文件? CFS:集群文件系統(tǒng)，協(xié)調(diào)文件系統(tǒng)中的元數(shù)據(jù)更新? CVM:集群的邏輯卷管理? VCS：集群軟件，啟動(dòng)和停止 SF/RAC 層，并管理檢測(cè)集群狀態(tài)。它基礎(chǔ)包含如上 Storage Foundation for Oracle 的所有功能。 但VERITAS 提 升 了 可 伸 縮 集 群 的 安 裝 、 配 置 和 管理 的 便 捷 性業(yè) 界 唯 一 的 異 構(gòu) 廣 域 故 障 切 換 策 略 的 關(guān) 鍵部 件 ： Global Cluster Manager 通 過(guò) 整合 故 障 切 換 與 復(fù) 制 ， 允 許 實(shí) 現(xiàn) 真 正 的 災(zāi) 難恢 復(fù) 功 能 。其 中 的 部 分 軟 件 包 括 內(nèi) 核 部 件 ， 它 們 有 利 于 加快 故 障 切 換 ， 并 允 許 靈 活 地 控 制 存 儲(chǔ) 子 系 統(tǒng)自 動(dòng) 化 集 群 擴(kuò) 展 ： 最 新 的 集 群 配 置 文 件 ，能 夠 在 瞬 間 傳 播 給 其 它 所 有 的 集 群 成 員 。 VERITAS 能 夠 提 供 這 種 界 面 ， 而且 所 有 的 支 持 平 臺(tái) 均 提 供 相 同 的 外 觀 和 感 覺(jué)與 其 它 VERITAS 存 儲(chǔ) 管 理 軟 件 實(shí) 現(xiàn) 無(wú) 縫整 合 ： 整 合 的 產(chǎn) 品 包 括 VERITAS Volume Manager、 VERITAS File System 、 VERITAS Volume Replicator 和 VERITAS NetBackupVERITAS 在 存 儲(chǔ) 虛 擬 化 和 存 儲(chǔ) 管 理 方 面 擁 有 十多 年 的 豐 富 經(jīng) 驗(yàn) 。使 用 基 于 Java 的 控 制 臺(tái) ， 就 能 夠 提 供 更具 顆 粒 度 的 管 理 功 能 。 當(dāng) 業(yè) 務(wù) 需 求 發(fā) 生 變 化 時(shí) ， 可 以 增加 或 取 消 集 群 節(jié) 點(diǎn)采 用 廣 泛 的 可 用 配 置 ， 為 復(fù) 雜 的 分 布 式 應(yīng) 用 提供 主 機(jī) 托 管 和 遷 移 。 與 此同 時(shí) ， VERITAS 還 創(chuàng) 建 了 Cluster Server 存 儲(chǔ) 認(rèn) 證 套 件 ， 允 許 供 應(yīng) 商 、伙 伴 和 轉(zhuǎn) 銷(xiāo) 商 在 自 己 的 站 點(diǎn) ， 使 用Cluster Server 認(rèn) 證 他 們 的 配 置IT 員 工 能 夠 使 用 一 個(gè) 界 面 ， 執(zhí) 行 跨 平 臺(tái) 管 理 ，而 且 能 夠 在 必 要 時(shí) 調(diào) 整 現(xiàn) 行 與 傳 統(tǒng) 配 件 ， 從 而減 少 培 訓(xùn) 與 硬 件 成 本 。 VERITAS Cluster Server 引 擎 能 夠 制 定 智 能 化 故 障 切 換 策 略增 強(qiáng) 集 群 管 理 的 自 動(dòng) 化 程 序 ， 保 障 實(shí) 現(xiàn) 最 大 應(yīng)用 正 常 運(yùn) 行 時(shí) 間 ， 并 以 最 有 效 的 方 式 利 用 服 務(wù)器 資 源安 全 性 ： VERITAS Cluster Server 包 括顆 粒 度 用 戶 權(quán) 限用 戶 角 色 包 括 管 理 員 、 操 作 員 和 客 戶 。 客 戶 或 技 術(shù) 顧 問(wèn) 也 可 以 創(chuàng) 建 定 制 代理如 配 置 VERITAS Cluster Server， 大 多 數(shù) 流行 企 業(yè) 應(yīng) 用 都 能 夠 實(shí) 現(xiàn) 高 可 用 特 性 。如果與 VERITAS Volume Replicator 或第三方復(fù)制解決方案結(jié)合使用，Global Cluster Manager 能夠通過(guò) IP 協(xié)議，停止或重新啟動(dòng)遠(yuǎn)程站點(diǎn)內(nèi)運(yùn)行于 Cluster Server 集群的應(yīng)用程序，從而允許 IT 員工在全球范圍內(nèi)，為用戶維護(hù)應(yīng)用服務(wù)訪問(wèn)。這意味著能夠?yàn)榭蛻艚桓陡?、更靈活、更可靠的數(shù)據(jù)與恢復(fù)。這種整合式解決方案的功能，超過(guò)了點(diǎn)產(chǎn)品解決方案。當(dāng)新的服務(wù)器加入集群后，它們將自動(dòng)享有集群成員資格。自動(dòng)集群擴(kuò)展技術(shù)保障以快速而可靠的方式，增加集群成員。? 可伸縮在集群化服務(wù)器配置內(nèi)，VERITAS Cluster Server 將安裝多達(dá) 32 個(gè)節(jié)點(diǎn)（在 IBM AIX 和 HPUX 環(huán)境，安裝多達(dá) 16 個(gè)節(jié)點(diǎn)） 。這樣，就能夠從合并式服務(wù)器環(huán)境獲取最大收益。除此之外，由于 VERITAS Cluster Server 能夠與廣泛系列的硬件、服務(wù)器及存儲(chǔ)器進(jìn)行協(xié)作，因此它能夠按照組織的變化和增長(zhǎng)需求，輕松地進(jìn)行調(diào)整。? 減少培訓(xùn)和配件成本VERITAS Cluster Server 是和體系架構(gòu)相獨(dú)的，它支持 UNIX 與 Windows 平臺(tái)，同時(shí)還支持業(yè)界最廣泛的異構(gòu)硬件配置，其中包括服務(wù)器、存儲(chǔ)器和 SAN 互連設(shè)備。例如，用戶角色包括集群管理員、操作員或客戶。這樣，用戶將根據(jù)授予的權(quán)限，啟動(dòng)或限制集群操作。就能夠在全球任何地方，監(jiān)控和遷移資源組、集群或整個(gè)站點(diǎn)。? 集成化產(chǎn)品套件能夠與其它 VERITAS 存儲(chǔ)管理軟件實(shí)現(xiàn)無(wú)縫集成，其中包括 VERITAS Volume Manager?、VERITAS File System?、VERITAS NetBackup?和 VERITAS Volume Replicator?。? 靈活的故障切換采用容錯(cuò)高可用引擎，支持基于策略的級(jí)聯(lián)型多方向故障切換，因?yàn)樵撘媸褂枚嗉?jí)故障檢測(cè)模式。? 智能化工用負(fù)荷管理VERITAS Cluster Server 以智能方式，監(jiān)控和管理系統(tǒng)容量及資源可用性，進(jìn)而以自動(dòng)化方式啟動(dòng)和遷移應(yīng)用服務(wù)。? 多平臺(tái)硬件支持由于通過(guò) VERITAS 集成實(shí)驗(yàn)室（Ilab）執(zhí)行廣泛的互操作測(cè)試，因此能夠支持所有的主要第三方存儲(chǔ)器供應(yīng)商和廣泛的多平臺(tái)硬件配置。? 高度可伸縮支持 SAN 環(huán)境和傳統(tǒng)客戶機(jī)/服務(wù)器環(huán)境內(nèi)的超大規(guī)模集群。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 32 頁(yè) 共 41 頁(yè)? 廣泛的應(yīng)用支持當(dāng)前支持廣泛系列的應(yīng)用，其中包括 Oracle、Sybase、DBInformix、Microsoft SQL Server 和 Microsoft Exchange，同時(shí) VERITAS 還在連續(xù)不斷地開(kāi)發(fā)新代理。? 簡(jiǎn)化管理可以選用基于 Web 或基于 Java 的直觀控制臺(tái)，在整個(gè)站點(diǎn)范圍監(jiān)控多達(dá) 16 個(gè)多平臺(tái)集群，并使用基于 Java 的接口執(zhí)行細(xì)顆粒度集群管理。它既能夠獨(dú)立使用，又能與許多成龍配套的 VERITAS 軟件解決方案相整合，因此在為當(dāng)今的混合型計(jì)算環(huán)境提供高可用性和災(zāi)難恢復(fù)方面，發(fā)揮至關(guān)重要的作用。除此之外，自動(dòng)化、智能化工作負(fù)荷管理，允許集群管理員從反應(yīng)型恢復(fù)轉(zhuǎn)向瞻型可用性管理，從而優(yōu)化利用各種資源。鑒于用戶需要以電子方式獲取更多的服務(wù)，提升應(yīng)用正常運(yùn)行水平的需求也急劇增長(zhǎng)。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 31 頁(yè) 共 41 頁(yè)五 、 VERITAS Cluster Server 簡(jiǎn) 介 業(yè) 界 領(lǐng) 先 的 高 可 用 應(yīng) 用 解 決 方 案 VERITAS Cluster Server?是業(yè)界領(lǐng)先的開(kāi)放式系統(tǒng)集群解決方案，是消除計(jì)劃內(nèi)和計(jì)劃外停機(jī)時(shí)間，簡(jiǎn)化服務(wù)器合并，并有效管理多平臺(tái)環(huán)境內(nèi)廣泛應(yīng)用的理想選擇。8． 支持多平臺(tái)，簡(jiǎn)化管理，降低管理成本VERITAS Cluster Server 支持包括 IBM AIX，SUN Solaris，HPUX 等在內(nèi)的多種通用的開(kāi)放平臺(tái)，也支持 Linux 和 Windows 平臺(tái)，不管是現(xiàn)在，還是將來(lái)，將集群平臺(tái)集中到 VCS，可以大大簡(jiǎn)化我們的日常集群管理工作。7． 方案支持應(yīng)用級(jí)的監(jiān)控和集群管理。比如自動(dòng)接管和手動(dòng)接管并存這種集群模式。4． 方案擁有先進(jìn)的 Campus Agent，解決城域集群特有的問(wèn)題。下圖是在生產(chǎn)中心發(fā)生災(zāi)難的情況下，災(zāi)備系統(tǒng)的接管流程的示意圖：同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 30 頁(yè) 共 41 頁(yè) 方 案 的 優(yōu) 勢(shì) 我們推薦的城域集群方案，為構(gòu)建穩(wěn)定的、可靠的、易于管理的災(zāi)備中心非常有幫助，該方案的優(yōu)勢(shì)主要表現(xiàn)在以下幾個(gè)方面：1． 有利于保證生產(chǎn)中心和災(zāi)備中心資源配置的一致性2． 有利于簡(jiǎn)化災(zāi)備中心災(zāi)難應(yīng)急的流程，保證災(zāi)備中心快速、順利的接管相應(yīng)的應(yīng)用系統(tǒng)。 針對(duì)這種情況，VERITAS Cluster Server 提供的 Campus Agent 可以幫助用戶簡(jiǎn)化災(zāi)備系統(tǒng)管理程序和災(zāi)難恢復(fù)程序。 這種故障和上面第一種情況的不同之處在于，生產(chǎn)中心的磁盤(pán)系統(tǒng)同時(shí)發(fā)生了故障。4)生產(chǎn)中心所有服務(wù)器和磁盤(pán)系統(tǒng)不可用 生產(chǎn)中心所有服務(wù)器和磁盤(pán)系統(tǒng)不可用，這種情況一般只有在真正的災(zāi)難的情況下才會(huì)發(fā)生，同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 29 頁(yè) 共 41 頁(yè)包括自然災(zāi)難和人為災(zāi)難。 VERITAS Cluster Server 支持動(dòng)態(tài)的集群節(jié)點(diǎn)加入，所以，事件的整個(gè)過(guò)程對(duì)業(yè)務(wù)系統(tǒng)不會(huì)產(chǎn)生任何影響。由于我們預(yù)先定義的策略是災(zāi)備系統(tǒng)不自動(dòng)接管業(yè)務(wù)，所以災(zāi)備系統(tǒng)不會(huì)試圖接管任何和業(yè)務(wù)相關(guān)的系統(tǒng)資源。整個(gè)應(yīng)用接管的過(guò)程如下圖：同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 28 頁(yè) 共 41 頁(yè)3)生產(chǎn)中心和災(zāi)備中心之間心跳鏈路故障 當(dāng)生產(chǎn)中心和災(zāi)備中心之間所有的心跳鏈路同時(shí)發(fā)生故障時(shí)，生產(chǎn)中心會(huì)認(rèn)為災(zāi)備中心的服務(wù)器 C 發(fā)生故障，并將該服務(wù)器 C 從集群中隔離出去，整個(gè)過(guò)程對(duì)應(yīng)用系統(tǒng)沒(méi)有任何影響，之后，我們?cè)谏a(chǎn)中心仍然保持一個(gè)由服務(wù)器 A 和服務(wù)器 B 構(gòu)成的集群。2)生產(chǎn)中心所有服務(wù)器不可用 當(dāng)生產(chǎn)中心所有的服務(wù)器系統(tǒng)都發(fā)生故障時(shí)，就遇到了我們所謂的服務(wù)器系統(tǒng)災(zāi)難，這個(gè)時(shí)候，服務(wù)器系統(tǒng) C 發(fā)現(xiàn)服務(wù)器 A、B 均出現(xiàn)了問(wèn)題，于是做好的了接管應(yīng)用的準(zhǔn)備，但是根據(jù)預(yù)先定義的規(guī)則，服務(wù)器 C 不會(huì)自動(dòng)接管該應(yīng)用，而是等我們?nèi)斯ご_認(rèn)災(zāi)難的真實(shí)性后，由管理員連接到服務(wù)器 C 的集群系統(tǒng)上，啟動(dòng)接管流程。1. 生產(chǎn)中心主業(yè)務(wù)服務(wù)器不可用2. 生產(chǎn)中心所有服務(wù)器不可用3. 生產(chǎn)中心和災(zāi)備中心之間心跳鏈路故障4. 生產(chǎn)中心所有服務(wù)器和磁盤(pán)系統(tǒng)不可用同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 27 頁(yè) 共 41 頁(yè)1)生產(chǎn)中心主業(yè)務(wù)服務(wù)器不可用 生產(chǎn)中心主業(yè)務(wù)服務(wù)器 A 發(fā)生故障，這只是常規(guī)意義上的服務(wù)器單點(diǎn)故障，利用 VCS 集群軟件，我們可以非常簡(jiǎn)單的在生產(chǎn)中心內(nèi)部完成應(yīng)用從服務(wù)器 A 到服務(wù)器 B 的自動(dòng)切換。 本方案推薦的 VERITAS Cluster Server 軟件可以全面地提供這方面的技術(shù)，滿足這種策略的需要，從而可以幫助建立覆蓋生產(chǎn)中心和災(zāi)備中心的統(tǒng)一的集群系統(tǒng)。這種要求需要服務(wù)器節(jié)點(diǎn) C 的各種資源配置始終和生產(chǎn)中心的服務(wù)器節(jié)點(diǎn) A 和 B 保持一致。同 城 應(yīng) 用 容 災(zāi) 系 統(tǒng) 方 案 第 26 頁(yè) 共 41 頁(yè) 但是從應(yīng)用邏輯上來(lái)看，我們對(duì)這 3 臺(tái)服務(wù)器的角色要求還是有區(qū)別的，我們要求生產(chǎn)中心的服務(wù)器 A 和 B 之間是允許并要求支持自動(dòng)切換的，而容災(zāi)中心的服務(wù)器 C，是不允許自動(dòng)接管生產(chǎn)中心的業(yè)務(wù)的。 我們知道，要統(tǒng)一管理生產(chǎn)中心和災(zāi)備中心的系統(tǒng)，我們必須將同一應(yīng)用的不同服務(wù)器同時(shí)納入同一個(gè)集群系統(tǒng)，如下圖。 建 立 一 個(gè) 滿 足 災(zāi) 備 需 要 的 集 群 系 統(tǒng) 現(xiàn)在新的技術(shù)需求出現(xiàn)了，因?yàn)槲覀冃枰獦?gòu)建這樣一個(gè)集群系統(tǒng)：1． 一個(gè)集群系統(tǒng)，覆蓋一個(gè)應(yīng)用相關(guān)的所有服務(wù)器系統(tǒng)，不僅僅包括生產(chǎn)中心的系統(tǒng)，還需要包括災(zāi)備中心的備用系統(tǒng)。通過(guò)配置 I/O fencing 仲裁盤(pán)方式可以規(guī)避由于心跳原因造成的“裂腦”現(xiàn)象。 除非我們有足夠可靠的心跳安全技術(shù)和策略，否則，為了避免這種“意外災(zāi)難”的發(fā)生，我們都會(huì)建議在災(zāi)備系統(tǒng)的接管策略上，采用“災(zāi)難人工確認(rèn)”原則的。這種情況對(duì)數(shù)據(jù)系統(tǒng)是非常危險(xiǎn)的，兩個(gè)服務(wù)器對(duì)一個(gè)數(shù)據(jù)資源的強(qiáng)制爭(zhēng)用，會(huì)導(dǎo)致業(yè)務(wù)數(shù)據(jù)的不一致，更有甚者，會(huì)導(dǎo)致業(yè)務(wù)數(shù)據(jù)的不可逆損壞。 我們知道，本地集群系統(tǒng)可以提供多種冗余技術(shù)，保證心跳通道不在同一時(shí)間一起中斷，常見(jiàn)的心跳冗余技術(shù)有：1