【正文】 使用高速的網(wǎng)絡(luò)，主要為避免當(dāng)系統(tǒng)規(guī)模擴(kuò)大時(shí)互聯(lián)網(wǎng)絡(luò)成為整個(gè)系統(tǒng)的瓶頸。存儲(chǔ)區(qū)域網(wǎng)（Storage Area Networks）技術(shù)解決了集群的每個(gè)結(jié)點(diǎn)可以直接連接/共享一個(gè)龐大的硬盤陣列，硬件廠商也提供多種硬盤共享技術(shù)，如光纖通道（Fiber Channel）、共享SCSI（Shared SCSI）。當(dāng)系統(tǒng)存儲(chǔ)的內(nèi)容越多，無共享結(jié)構(gòu)（Sharednothing Structure）的代價(jià)越大，因?yàn)槊颗_(tái)服務(wù)器需要一樣大的存儲(chǔ)空間，任何的更新需要涉及到每臺(tái)服務(wù)器，系統(tǒng)的維護(hù)代價(jià)會(huì)非常高。 共享存儲(chǔ)（shared storage）：它為服務(wù)器池提供一個(gè)統(tǒng)一的存儲(chǔ)區(qū)，這樣很容易使得服務(wù)器池?fù)碛邢嗤膬?nèi)容，提供相同的服務(wù)。當(dāng)整個(gè)系統(tǒng)收到的負(fù)載超過目前所有結(jié)點(diǎn)的處理能力時(shí)，可以在服務(wù)器池中增加服務(wù)器來滿足不斷增長的請(qǐng)求負(fù)載。 服務(wù)器池（server pool）：是一組真正執(zhí)行客戶請(qǐng)求的服務(wù)器，執(zhí)行的服務(wù)有WEB、MAIL、FTP和DNS等。在考慮服務(wù)器系統(tǒng)的透明性、可伸縮性、高可用性和易管理性。例如，負(fù)載均衡器層提供了負(fù)載平衡、可伸縮性和高可用性等，在服務(wù)器層可以運(yùn)行不同的網(wǎng)絡(luò)服務(wù)，如Web、Mail和Media等，來提供不同的可伸縮網(wǎng)絡(luò)服務(wù)。整個(gè)服務(wù)器集群的結(jié)構(gòu)對(duì)客戶是透明的，而且無需修改客戶端和服務(wù)器端的程序。 使用負(fù)載均衡技術(shù)實(shí)現(xiàn)的服務(wù)器集群服務(wù)LVS集群采用IP負(fù)載均衡技術(shù)和基于內(nèi)容請(qǐng)求分發(fā)技術(shù)。n 應(yīng)用服務(wù)器集群216。n INTERNET應(yīng)用服務(wù)器集群216。完成 DBCA 后，啟動(dòng)了一個(gè)功能完善的 Oracle RAC 集群！ SQL Server數(shù)據(jù)庫服務(wù)器SQL Server 數(shù)據(jù)庫服務(wù)器: 采用Microsoft Windows2003 Advance Server操作系統(tǒng)，兩臺(tái)機(jī)器之間用串口線連接，數(shù)據(jù)庫要在兩個(gè)機(jī)器上都要安裝，通過操作系統(tǒng)內(nèi)置的MSCS集群應(yīng)用軟件組建兩臺(tái)SQL SERVER服務(wù)器的Cluster服務(wù)，兩臺(tái)機(jī)器訪問同一個(gè)IP地址，做數(shù)據(jù)庫漂移，保證一臺(tái)壞掉，另一臺(tái)仍然可以繼續(xù)工作。 在試圖開始創(chuàng)建集群化數(shù)據(jù)庫之前，還應(yīng)確保已安裝的所有服務(wù)（Oracle TNS 監(jiān)聽器、CRS 進(jìn)程等）正在運(yùn)行。還應(yīng)核實(shí)我們是以 oracle 用戶帳戶登錄的： 以 oracle 登錄 xhost +access control disabled, clients can connect from any host su oracle核實(shí) linux1 上的環(huán)境變量 $ env | grep ORAORACLE_SID=orcl1ORACLE_BASE=/u01/app/oracleORACLE_TERM=xterm核實(shí) linux2 上的環(huán)境變量 $ env | grep ORAORACLE_SID=orcl2ORACLE_BASE=/u01/app/oracleORACLE_TERM=xterm安裝 Oracle 數(shù)據(jù)庫 10g 軟件 使用以下命令安裝 Oracle 數(shù)據(jù)庫 10g 軟件： $ cd ~oracle$ /u01/app/oracle/orainstall/db/Disk1/runInstaller ignoreSysPrereqsn 創(chuàng)建 Oracle 集群數(shù)據(jù)庫 數(shù)據(jù)庫創(chuàng)建過程應(yīng)只在集群的一個(gè)節(jié)點(diǎn)上執(zhí)行！ 我們將使用 DBCA 創(chuàng)建集群化數(shù)據(jù)庫。 核實(shí)環(huán)境變量 啟動(dòng) OUI 之前，應(yīng)先從控制臺(tái)以 root 運(yùn)行 xhost 命令以允許建立 X Server 服務(wù)器連接。取而代之的是，我們將在 Oracle 數(shù)據(jù)庫 10g 安裝之后使用數(shù)據(jù)庫創(chuàng)建助手即 DBCA 創(chuàng)建數(shù)據(jù)庫。（注意：在寫本文時(shí)，Oracle 10g 的 OUI 無法發(fā)現(xiàn)標(biāo)記為 Linux ASMLib 的磁盤/卷。 檢查集群節(jié)點(diǎn) $ /u01/app/oracle/product/linux1 1linux2 2檢查 CRS 自動(dòng)啟動(dòng)腳本 $ ls l /etc/*rxrxrx 1 root root 1207 Feb 5 19:41 /etc/*rxrxrx 1 root root 5492 Feb 5 19:41 /etc/*rxrxrx 1 root root 18617 Feb 5 19:41 /etc/*rxrxrx 1 root root 4553 Feb 5 19:41 /etc/*n 安裝 Oracle 數(shù)據(jù)庫 10g 軟件 僅在集群的一個(gè)節(jié)點(diǎn)上執(zhí)行下列安裝過程！Oracle 數(shù)據(jù)庫軟件將由 Oracle Universal Installer 安裝到集群的所有其他節(jié)點(diǎn)。 核實(shí) linux1 上的環(huán)境變量 $ env | grep ORAORACLE_SID=orcl1ORACLE_BASE=/u01/app/oracleORACLE_TERM=xterm核實(shí) linux2 上的環(huán)境變量 $ env | grep ORAORACLE_SID=orcl2ORACLE_BASE=/u01/app/oracleORACLE_TERM=xterm安裝集群就緒服務(wù) 執(zhí)行以下任務(wù)來安裝 Oracle CRS： $ cd ~oracle$ ./orainstall/crs/Disk1/runInstaller ignoreSysPrereqs核實(shí) CRS 安裝 安裝 CRS 后，我們可以執(zhí)行多個(gè)測試來核實(shí)安裝成功。要使 ASM 可用，應(yīng)首先運(yùn)行 ASM 實(shí)例。這兩個(gè)共享 CRS 文件是： Oracle 集群注冊(cè)表 (OCR) 位置：/u02/oradata/orcl/OCRFile 大?。簙 100MB CRS 表決磁盤 位置：/u02/oradata/orcl/CSSFile 大小：~ 20MB 注意：對(duì)于我們此處的安裝而言，無法將 ASM 用于這兩個(gè) CRS 文件，即 OCR 或 CRS 表決磁盤。 要進(jìn)行維護(hù)，請(qǐng)轉(zhuǎn)到操作系統(tǒng)的單用戶模式。 所支持的停止方法是關(guān)閉計(jì)算機(jī)或使用 stop。 如果存在網(wǎng)絡(luò)斷開（節(jié)點(diǎn)之間相互失去通信），則一個(gè)或多個(gè)節(jié)點(diǎn)可以自動(dòng)重新啟動(dòng)以防數(shù)據(jù)損壞。如果 CRS 堆棧未啟動(dòng)，每個(gè) RAC 節(jié)點(diǎn)只能運(yùn)行一組 CRS 后臺(tái)程序。表決文件的大小至少應(yīng)為 20MB，OCR 文件的大小至少應(yīng)為 100MB。） 必須將 CRS HOME 和 ORACLE_HOME 安裝在不同的位置。 CRS 既可以在供應(yīng)商集群件（如 Sun Cluster、HP Serviceguard、IBM HACMP、TruCluster、Veritas Cluster、Fujitsu Primecluster 等）上運(yùn)行也可以在沒有它的情況下運(yùn)行。OUI 將把此軟件程序包復(fù)制到 RAC 集群中配置的所有節(jié)點(diǎn)。 安裝 CRS 后，用于安裝 Oracle 數(shù)據(jù)庫 10g 的 Oracle Universal Installer (OUI) 將自動(dòng)識(shí)別這些節(jié)點(diǎn)。在通常的操作中，CRS 將向集群中配置的所有節(jié)點(diǎn)發(fā)送消息（通過一種特殊的 ping 操作）—通常稱作“心跳”。 Oracle CRS 包含所有集群和數(shù)據(jù)庫配置元數(shù)據(jù)以及多個(gè)適用于 RAC 的系統(tǒng)管理特性。CRS 的安裝文件并將其解壓縮到 linux1 的 /u01/app/oracle/orainstall/crs/Disk1 目錄中。 n 安裝 Oracle 集群就緒服務(wù)軟件 僅在集群的一個(gè)節(jié)點(diǎn)上執(zhí)行下列安裝過程！Oracle CRS 軟件將被 Oracle Universal Installer 安裝到集群的所有其他節(jié)點(diǎn)。 使用標(biāo)準(zhǔn) Linux I/O 的 ASM：此方法使用標(biāo)準(zhǔn) Linux I/O 系統(tǒng)調(diào)用在 ASM 管理的原始字符設(shè)備上創(chuàng)建所有 Oracle 數(shù)據(jù)庫文件。 有兩個(gè)不同方法可在 Linux 上配置 ASM： 使用 ASMLib I/O 的 ASM：此方法使用 ASMLib 調(diào)用在由 ASM 管理的原始?jí)K設(shè)備上創(chuàng)建所有 Oracle 數(shù)據(jù)庫文件。ASM 跨所有可用磁盤驅(qū)動(dòng)器并行執(zhí)行負(fù)載平衡，以防熱點(diǎn)并最大限度地提高性能（甚至對(duì)于快速更改數(shù)據(jù)使用模式也是如此）。ASM 被內(nèi)置到 Oracle 內(nèi)核中，通過它，數(shù)據(jù)庫管理員可以全天候管理單個(gè)實(shí)例以及集群實(shí)例的上千個(gè)磁盤驅(qū)動(dòng)器。 本節(jié)將配置自動(dòng)存儲(chǔ)管理 (ASM)，以將其用作所有 Oracle 物理數(shù)據(jù)庫文件（數(shù)據(jù)、聯(lián)機(jī)重做日志、控制文件、歸檔重做日志）的文件系統(tǒng)/卷管理器。 n 安裝并配置自動(dòng)存儲(chǔ)管理和磁盤 應(yīng)在所有節(jié)點(diǎn)上執(zhí)行大多數(shù)安裝和配置過程。但如果您執(zhí)行了其他安裝類型（例如，高級(jí)服務(wù)器），則可能缺少某些程序包，并將需要安裝它們。 n 檢查 Oracle 10g 的 RPM 程序包 在集群中的所有節(jié)點(diǎn)上執(zhí)行以下檢查！ 安裝 Linux O/S（RHEL 3 或 WBEL）時(shí)，應(yīng)驗(yàn)證是否安裝了所有必需的 RPM。但本文使用較舊的方法 rcp 來將 Oracle 軟件復(fù)制到集群中的其他節(jié)點(diǎn)。但應(yīng)為 RAC 和補(bǔ)丁集安裝啟用 rcp 和 rsh。rsh 后臺(tái)程序使用位于用戶（oracle 的）主目錄中的 /etc/ 文件或 .rhosts 文件驗(yàn)證用戶。運(yùn)行 Oracle Installer (runInstaller) 的節(jié)點(diǎn)上的 oracle UNIX 帳戶必須為 RAC 集群中所有其他節(jié)點(diǎn)所信任。為 SGA 分配足夠的容量對(duì)于 Oracle 的性能非常重要，因?yàn)樗?fù)責(zé)保存數(shù)據(jù)庫緩沖區(qū)高速緩存、共享 SQL、訪問路徑以及更多。在進(jìn)程之間不需要復(fù)制數(shù)據(jù)。 設(shè)置共享內(nèi)存 共享內(nèi)存通過將通用的結(jié)構(gòu)和數(shù)據(jù)放在共享內(nèi)存段中，使得進(jìn)程可以對(duì)它們進(jìn)行訪問。我使用的方法將通過 echo 命令將值直接回顯到 /proc 文件系統(tǒng)的相應(yīng)路徑中。這包括驗(yàn)證足夠的交換空間、設(shè)置共享內(nèi)存和信號(hào)，以及最后如何設(shè)置操作系統(tǒng)的最大文件句柄數(shù)。 您可以通過運(yùn)行以下命令來查看 /tmp 中的可用空間： df k /tmpFilesystem 1Kblocks Used Available Use% Mounted on/dev/hda2 36337384 4691460 29800056 14% /如果由于某種原因，您在 /tmp 中沒有足夠的空間，您可以在其他文件系統(tǒng)中臨時(shí)創(chuàng)建空間，并在安裝期間將您的 TEMP 和 TMPDIR 指向該空間。 創(chuàng)建 Oracle 的組和用戶 mkdir p /u01/app groupadd g 115 dba useradd u 175 g 115 d /u01/app/oracle s /bin/bash c Oracle Software Owner p oracle oracle chown R oracle:dba /u01 passwd oracle su oracle注意：當(dāng)您為每個(gè) RAC 節(jié)點(diǎn)設(shè)置 Oracle 環(huán)境變量時(shí)，請(qǐng)確保為每個(gè) RAC 節(jié)點(diǎn)分配唯一的 Oracle SID！ linux1 :ORACLE_SID=orcl1 linux2 :ORACLE_SID=orcl2 我們?yōu)?Oracle 集群文件系統(tǒng) (OCFS) 創(chuàng)建掛載點(diǎn)，它將用于存儲(chǔ) Oracle 集群就緒服務(wù) (CRS) 的文件。除非希望保留舊的內(nèi)核鏡像，否則不需要向您的引導(dǎo)加載器配置中添加任何新節(jié)。White Box Enterprise Linux (Respin 1) 包含內(nèi)核 1； 備份您的 GRUB 配置文件： 在大多數(shù)情況下，您要將 GRUB 用于引導(dǎo)加載程序。 現(xiàn)在將以下各行添加到 RAC 集群中每個(gè)節(jié)點(diǎn)的 /etc/ 文件中，從而使以上更改成為永久性更n 獲取并安裝合適的 Linux 內(nèi)核 實(shí)施描述了一個(gè)雙節(jié)點(diǎn)的集群（每個(gè)節(jié)點(diǎn)具有單處理器）— 每個(gè)服務(wù)器均運(yùn)行 WBEL。由于不允許對(duì)等端發(fā)送超過緩沖區(qū)大小窗口的數(shù)據(jù)，因此接收緩沖區(qū)無法溢出。 Oracle 強(qiáng)烈建議將默認(rèn)的和最大的發(fā)送緩沖區(qū)大?。⊿O_SNDBUF 套接字選項(xiàng)）調(diào)整為 256KB，并將默認(rèn)的和最大的接收緩沖區(qū)大?。⊿O_RCVBUF 套接字選項(xiàng)）調(diào)整為 256KB。 216。 隨后發(fā)送到 VIP 的數(shù)據(jù)包前往新的節(jié)點(diǎn)，該節(jié)點(diǎn)將把錯(cuò)誤的 RST 數(shù)據(jù)包返回客戶端。 新的節(jié)點(diǎn)重新進(jìn)行地址解析，顯示該地址的一個(gè)新的 MAC 地址。當(dāng)一個(gè)節(jié)點(diǎn)發(fā)生故障時(shí)，與其關(guān)聯(lián)的 VIP 將被自動(dòng)故障切換到另外某個(gè)節(jié)點(diǎn)上。216。 確保對(duì)兩個(gè)節(jié)點(diǎn)進(jìn)行了所有適當(dāng)?shù)木W(wǎng)絡(luò)設(shè)置。當(dāng)運(yùn)行 srvctl start nodeapps n node_name 命令時(shí)，所有的虛擬 IP 地址將被激活。 請(qǐng)注意，只需在兩個(gè)節(jié)點(diǎn)的 /etc/hosts 文件中定義虛擬 IP 地址。可以使用網(wǎng)絡(luò)配置 GUI 完成這兩個(gè)任務(wù)。 在 Red Hat Enterprise Linux 3 中配置網(wǎng)絡(luò)設(shè)置的最簡單方法就是使用網(wǎng)絡(luò)配置程序。 216。雖然可以將公共網(wǎng)絡(luò)用于互聯(lián)，但由于它可能導(dǎo)致數(shù)據(jù)庫性能降低（減少高速緩存合并和集群管理器流量的帶寬），因此不建議使用這種方法。 每個(gè)節(jié)點(diǎn)均應(yīng)有一個(gè)用于公共網(wǎng)絡(luò)的靜態(tài) IP 地址和一個(gè)用于專用集群互聯(lián)的靜態(tài) IP 地址?，F(xiàn)在我們需要配置 /etc/hosts 文件，并調(diào)整幾個(gè)用于互聯(lián)的網(wǎng)絡(luò)設(shè)置。 n 配置網(wǎng)絡(luò)設(shè)置216。我對(duì)第二個(gè)節(jié)點(diǎn)使用“l(fā)inux2”。安裝程序?qū)⑦x擇不激活 eth1。在配置機(jī)器名和網(wǎng)絡(luò)時(shí)，確保配置相應(yīng)值。然后提供您的網(wǎng)關(guān)和 DNS 服務(wù)器，最后關(guān)閉該對(duì)話框。 eth0：取消選中 [Configure using DHCP] 復(fù)選項(xiàng)選中 [Activate on boot]—