【導(dǎo)讀】存儲上的lun必須對所有節(jié)點(diǎn)可見。SCSI-3PR就是一組SCSI命令集，用在多個系統(tǒng)訪問一個共享存儲的時候協(xié)調(diào)之用。安裝完SF后可用vxfentsthdw可做檢查。對于采用clusterfilesystem的veritasha方案，一定要采用共享磁盤做I/Ofencing；以不考慮I/Ofencing的策略。重啟OS，檢查是否修改生效。網(wǎng)絡(luò)要求1個走交換機(jī)的業(yè)務(wù)網(wǎng)段，1個網(wǎng)線直連的私有網(wǎng)段。業(yè)務(wù)網(wǎng)絡(luò)網(wǎng)卡要求2張獨(dú)立網(wǎng)卡做bond，可以作為備用心跳線。每個機(jī)器業(yè)務(wù)網(wǎng)段的2個bond網(wǎng)口分別上聯(lián)到2個獨(dú)立的網(wǎng)絡(luò)交換機(jī)上面。

　　

【正文】 YYYY HH:MI:SS AM39。)tstamp 2 from User.Table。 SQL exit listener 監(jiān)控 默認(rèn)監(jiān)控腳本 /opt/VRTSagents/ha/bin/Netlsnr/ Owner oracle Home /opt/oracle/products/TnsAdmin Listener EnvFile MonScript ./bin/Netlsnr/ LsnrPwd Encoding HA 切換 HA 切換日志 Veritas 所有的日志放在 /var/VRTSvcs/log/ 下面， /var/VRTSvcs/log/ HA 所有動作的詳盡日志， 2 個節(jié)點(diǎn)同步生成。 /var/VRTSvcs/log/ Oracle 資源的日志 Veritas HA 的日志條目按關(guān)鍵詞分為 4 個級別： INFO/NOTICE/WARNING/ERROR ， 在 /var/VRTSvcs/log/ 文件中監(jiān)控 WARNING/ERROR 即可。 HA 切換測試 環(huán)境： host1 和 host2 兩個節(jié)點(diǎn)，資源，應(yīng)用跑在 host1 。 有 eth14 ，共 4 個網(wǎng)口。 eth1 ， eth3 這 2 個獨(dú)立網(wǎng)口用直連線做首選心跳， eth0 ， eth2 走業(yè)務(wù)，做 bond 后上聯(lián)到 2 個網(wǎng)絡(luò)交換機(jī)。 默認(rèn)資源配置： MonitorInterval 60s OfflineMonitorInterval 300s Oracle 資源參數(shù)配置 : MonitorInterval 60 ， FaultOnMonitorTimeouts 2 ， MonitorTimeout 20 測試場景： (1) host1 OS reboot 測試結(jié)果： 60 秒內(nèi)發(fā)現(xiàn)問題，資源切換到 host2 。 (2) 網(wǎng)絡(luò)測試 Ora_NIC 監(jiān)控業(yè)務(wù)網(wǎng)卡 bond0 ， Ora_IP 是 VIP ，附在 bond0:0 ** 單獨(dú)斷掉心跳 eth1 ， eth3 ifdown eth1 ifup eth1 測試結(jié)果：對 ha 無影響， headbeat 鏈路會切 換 ** 單獨(dú)斷掉業(yè)務(wù)網(wǎng)卡 ifdown bond0 測試結(jié)果： down 掉 bond0 ，導(dǎo)致 Ora_NIC 資源 down 掉， vip 附在 bond0:0 上，業(yè)務(wù) bond0 當(dāng)?shù)?，會?dǎo)致 Ora_IP 當(dāng)?shù)?，監(jiān)聽 down ， oracle down ，資源切換到 host2 (3) 監(jiān)聽 down 掉 測試結(jié)果： 60 秒內(nèi)發(fā)現(xiàn)問題，不做處理。 標(biāo)記資源 Faulted ，節(jié)點(diǎn) Partial Online 。 監(jiān)聽恢復(fù) 5 分鐘后，會把資源標(biāo)記為正常，節(jié)點(diǎn)狀態(tài) Online 。 (4) oracle shutdown abort 測試結(jié)果：資源正常切換到 host2 (5) db hang 測試結(jié)果： db 無法執(zhí)行 update ， 60+20 秒內(nèi)檢測到，進(jìn)行切換。 連續(xù)出現(xiàn) 2 次 update 超時事件就會切換。 常用命令 Veritas DMP 磁盤的多路徑信息 vxdmpadm list dmpnode all |more vxdmpadm list dmpnode dmpnodename=hds9500alua0_0 vxdmpadm h list Report detailed list of attributes associated with the specified entities such as DMP devices. Usage: vxdmpadm list dmpnode [all] vxdmpadm list dmpnode [dmpnodename=dmpdevicename] vxdmpadm list dmpnode [enclosure=enclrname] 查看 lun 信息 dmp 把磁盤初始化之后才能用 vxdisk list 看到盤 vxdisk list|more DEVICE TYPE DISK GROUP STATUS hds9500alua0_0 auto:cdsdisk redovg01 redodg online hds9500alua0_1 auto:cdsdisk redovg02 redodg online hds9500alua0_2 auto:cdsdisk archvg01 archdg online hds9500alua0_3 auto:cdsdisk archvg02 archdg online vxdisk list hds9500alua0_0 可以顯示這個 lun 的 path Veritas VxVM 顯示 dg vxdg list vxdg list redodg Veritas VCS 啟動 vcs hastart 在本地啟動 ha 停止 vcs hastop all 停掉所有節(jié)點(diǎn)上的 vcs hastop local 停止本節(jié)點(diǎn)上的 vcs ，也停掉本節(jié)點(diǎn) running 的資源 hastop all force 停止 vcs ，但保持所有資源可用 資源組 hagrp online myha sys host1 把資源組 myha 在 host1 拉起來 hagrp offline myha sys host1 資源組從 host1 離線 資源組切換 hagrp switch myha to host2 資源從 host1 切換到 host 2 tail f /var/VRTSvcs/log/ 查看切換日 志 檢查 ha 狀態(tài) hastatus ha 詳細(xì)狀態(tài)信息，包含每個資源 hastatus sum ha 基本情況 資源 fault 導(dǎo)致切換后，需要手工 clear 資源，才能使節(jié)點(diǎn)返回正?？汕袚Q狀態(tài)。 hares clear Ora_Oracle sys host1 hares clear Ora_IP sys host1 資源組凍結(jié) hagrp freeze myha 凍結(jié) ha 后，維護(hù)資源不會導(dǎo)致 ha 切換。 hagrp unfreeze myha 解凍 探測資源 hares probe Ora_Oracle sys host2 資源恢復(fù)正常后，需要探測一下， ha 狀態(tài)才能正常。 SMTP 報警郵件配置 參考 P170 Tools Notifier Wizard Click Next Service Group Configuration resource name Notifier nodes all Configure Modes 選 smtp SMTP Server SMTP Server SMTP Recipients Severity Level Information Nic Resource Configuration 指定 Notifier 資源依賴的 NIC 資源 Resource Name Notifier_Nic Device 建議用業(yè)務(wù)網(wǎng)卡，這個機(jī)器是 bond0 目前我們的郵件網(wǎng)關(guān)只能發(fā)出發(fā)件人以 為結(jié)尾的郵件， Veritas SMTP 不能配置發(fā)件人，所以郵件沒有辦法發(fā)出來。 參考文檔 SF 文檔中心 SF for Linux SF PR1 for Linux Storage Foundation Version for UNIX/Linux