【導(dǎo)讀】故障診斷與恢復(fù)參考手冊。國電南瑞科技股份有限公司

　　

【正文】 關(guān)閉，否則請耐心等待。如果運(yùn)行 stopdb（ STOPDB）腳本等待時(shí)間非常漫長（超過 20 分鐘），則可能需要運(yùn)行強(qiáng)制關(guān)閉數(shù)據(jù)庫的命令，但請注意千萬不要在 stopdb執(zhí)行過程中執(zhí)行 ctrl+c 操作。 強(qiáng)制關(guān)閉的數(shù)據(jù)庫的腳本可以通過修改 stopdb（ STOPDB）腳本實(shí)現(xiàn)，正常的 stopdb（ STOPDB）腳本如下： kf071 cat stopdb lsnrctl stop sqlplus /nolog EOF connect sys/platform as sysdba shutdown immediate EOF 拷貝 stopdb 腳本為 stopdb_abort，修改 stopdb_abort 腳本中 shutdown immediate 為 shutdown abort 即可。 運(yùn)行 stopdb_abort 即可強(qiáng)制關(guān)閉數(shù)據(jù)庫，注意該腳本的運(yùn)行可能導(dǎo)致某些未提交的數(shù)據(jù)丟失，而 stopdb 不會(huì)導(dǎo)致該問題。 如果數(shù)據(jù)庫是磁盤陣列方式，如果需要 shutdown 或 reboot 該節(jié) 點(diǎn)，那么必須注意 shutdown 或 reboot 前必須關(guān)閉磁盤陣列軟件，否則可能導(dǎo)致重啟機(jī)器后 ORACLE 無法再次啟動(dòng)。 4. 啟動(dòng)數(shù)據(jù)庫 啟動(dòng)數(shù)據(jù)庫需要以 ORACLE 用戶登錄到數(shù)據(jù)庫節(jié)點(diǎn)，執(zhí)行 startdb（ STARTDB）腳本啟動(dòng)該節(jié)點(diǎn)的 ORACLE 實(shí)例。 具體數(shù)據(jù)庫實(shí)例節(jié)點(diǎn)的 IP 地址可以通過在 DB_SERVICE 服務(wù)器上運(yùn)行g(shù)et_all_db 命令確定（結(jié)果中的 machine 列表示該實(shí)例運(yùn)行的節(jié)點(diǎn)的 IP 地址）。 正常情況下，執(zhí)行 startdb（ STARTDB）腳本需要等待若干分鐘， ORACLE實(shí)例才會(huì)啟動(dòng)。舉 例如下： kf071 ./startdb LSNRCTL for Compaq Tru64 UNIX: Version Production on 267 月 2020 02:27:39 Copyright (c) 1991, 2020, Oracle Corporation. All rights reserved. 正 在 連 接 到 (DESCRIPTION=(ADDRESS=(PROTOCOL=TCP)(HOST=kf071)(PORT=1521))) 故障診斷與恢復(fù)參考手冊 25 TNS12541: TNS：無監(jiān)聽器 TNS12560: TNS: 協(xié)議適配器錯(cuò)誤 TNS00511: 無監(jiān)聽器 Compaq Tru64 UNIX Error: 61: Connection refused LSNRCTL for Compaq Tru64 UNIX: Version Production on 267 月 2020 02:27:39 Copyright (c) 1991, 2020, Oracle Corporation. All rights reserved. 啟動(dòng) /users/oracle/product/：請稍候 ... TNSLSNR for Compaq Tru64 UNIX: Version Production 系 統(tǒng) 參 數(shù) 文 件 為/users/oracle/product/寫入 /users/oracle/product/志信息 監(jiān)聽：(DESCRIPTION=(ADDRESS=(PROTOCOL=tcp)(HOST=kf071)(PORT=1521)) 正 在 連 接 到 (DESCRIPTION=(ADDRESS=(PROTOCOL=TCP)(HOST=kf071)(PORT=1521))) LISTENER 的 STATUS 別名 LISTENER 版本 TNSLSNR for Compaq Tru64 UNIX: Version Production 啟動(dòng)日期 267月 2020 02:27:39 正常運(yùn)行時(shí)間 0 天 0 小時(shí) 0 分 0 秒 跟蹤級(jí)別 off 安全性 OFF SNMP OFF 監(jiān) 聽 器 參 數(shù) 文 件 /users/oracle/product/監(jiān) 聽 器 日 志 文 件 /users/oracle/product/監(jiān)聽端點(diǎn)概要 ... (DESCRIPTION=(ADDRESS=(PROTOCOL=tcp)(HOST=kf071)(PORT=1521))) 服務(wù)摘要 .. 服務(wù) o2020 包含 1 個(gè)例程。 例程 o2020, 狀態(tài) UNKNOWN, 包含此服務(wù)的 1 個(gè)處理程序 ... 命令執(zhí)行成功 SQL*Plus: Release Production on 星期四 7 月 26 02:27:39 2020 Copyright (c) 1982, 2020, Oracle Corporation. All rights reserved. SQL 已連接到空閑例程。 故障診斷與恢復(fù)參考手冊 26 SQL ORACLE 例程已經(jīng)啟動(dòng)。 Total System Global Area 538416296bytes Fixed Size 734376bytes Variable Size 452984832bytes Database Buffers 83886080bytes Redo Buffers 811008bytes 數(shù)據(jù)庫裝載完畢。 數(shù)據(jù)庫已經(jīng)打開。 SQL 從 Oracle9i Release Production JServer Release Production 中斷開 必須看到“ 數(shù)據(jù)庫已經(jīng)打開 ”才說明數(shù)據(jù)庫實(shí)例正常啟動(dòng)，否則請耐心等待。如果運(yùn)行 startdb（ STARTDB） 腳本等待時(shí)間非常長，請注意千萬不要在 startdb 執(zhí)行過程中執(zhí)行 ctrl+c 操作。 如果數(shù)據(jù)庫是磁盤陣列方式，啟動(dòng)數(shù)據(jù)庫需前需要先啟動(dòng)磁盤陣列軟件。 故障診斷與恢復(fù)參考手冊 27 附錄 B OPEN3000日常巡檢表 日巡檢項(xiàng)目 序號(hào) 巡檢內(nèi)容 巡檢記錄 備注 1. 服務(wù)器硬件： 服務(wù)器面板指示燈狀態(tài)； 服務(wù)器網(wǎng)絡(luò)指示燈狀態(tài)（如果存在磁盤陣列還要查看心跳連接燈狀態(tài)）； 電源模塊指示燈狀態(tài)； 使用 ping 與 rlogin 命令測試 服務(wù)器 ，如果是 PC機(jī)則使用 ping并直接打開服務(wù)器的顯示器進(jìn)行查看 。 SCADA 服務(wù)器 2. 前置服務(wù)器 3. PAS 服務(wù)器 4. DTS 服務(wù)器 5. 報(bào)表服務(wù)器 6. WEB 服務(wù)器 7. 歷史服務(wù)器 8. 磁盤陣列 9. 交換機(jī)硬件： 交換機(jī)面板 指示 燈狀態(tài)； 使用 ping 命令測試交換機(jī)。 主干交換機(jī) 10. 前置交換機(jī) 11. WEB 交換機(jī) 12. 其它硬件： 查看硬件面板指示燈狀態(tài)； 隔離裝置 13. 防火墻 14. 路由器 15. 天文鐘 16. 應(yīng)用狀態(tài)： 通過系統(tǒng)管理界面（ sys_adm）； 2 、 在 工 作 站 或 者 服 務(wù) 器 上 使 用showservice 命令； 使用歷史告警查詢界面查看自動(dòng)化信息 應(yīng)用工況告警信息 。 PUBLIC 17. SCADA 18. FES 19. DB_SERVICE 20. 服務(wù)器磁盤、進(jìn)程與 CPU 使用狀態(tài)： 通過系統(tǒng)管理界面（ sys_adm）； 使用命令 vmstat 30 查看服務(wù)器 30 秒的 CPU 使用情況， PC 機(jī)使用任務(wù)管理器進(jìn)行查看； 使用命令 df –k 查看磁盤使用情況 ，如果磁盤使用 80%即要備份信息后進(jìn)行清理磁盤 ； 使用歷史告 警查詢界面查看自動(dòng)化信息 進(jìn)程信息與系統(tǒng)資源信息告警信息 SCADA 服務(wù)器 21. 前置服務(wù)器 22. PAS 服務(wù)器 23. DTS 服務(wù)器 24. 報(bào)表服務(wù)器 25. WEB 服務(wù)器 26. 網(wǎng)絡(luò)狀態(tài)： 查看系統(tǒng)配置圖所有節(jié)點(diǎn)與交換機(jī)的網(wǎng)絡(luò)狀態(tài)； 查看節(jié)點(diǎn)信息表與交換機(jī)信息表里有關(guān)網(wǎng)絡(luò)狀態(tài)域信息； 使用歷史告警查詢界面查看自動(dòng)化信服務(wù)器 27. 交換機(jī) 28. 工作站 故障診斷與恢復(fù)參考手冊 28 息 網(wǎng)絡(luò)工況 與交換機(jī)工況 告警信息 29. 報(bào)表： 1 、通過系統(tǒng)管理界面查看REPORT_SERVICE 應(yīng)用； 在報(bào)表服務(wù)器上查看報(bào)表定時(shí)發(fā)布是否完成； 在 I 區(qū)與 III 區(qū)分別查看報(bào)表是否可瀏覽。 報(bào)表服務(wù)器 30. I 區(qū)工作站 31. III 區(qū)客戶端 32. WEB： 在 III 區(qū)客戶端瀏覽曲線； 在 III 區(qū)客戶端查詢歷史告警； 在 I 區(qū)與 III 區(qū)運(yùn)行 DB_SERVICE 應(yīng)用服務(wù)器上使用 search_file命令查看服務(wù)器上是否 WEB 庫的文件累積。 曲線瀏覽 33. 告警查詢 34. 文件累積 35. 商用庫： 在運(yùn)行 DB_SERVICE 應(yīng)用服務(wù)器上使用 get_all_db 查看商用庫連接 情況； 在運(yùn)行 DB_SERVICE 應(yīng)用服務(wù)器上使用 search_file命令查看服務(wù)器上是否有文件累積； 使用歷史告警查詢界面查看自動(dòng)化信息 數(shù)據(jù)庫資源信息告警。 o30001 36. o30002 37. wo30001 38. wo30002 39. 通道與廠站： 查看通道與通訊廠站監(jiān)視圖； 使用歷史告警查詢界面查看前置信息通道工況與通訊廠站工況告警。 退出通道 40. 退出廠站 41. 點(diǎn)集監(jiān)視（可選）： 使用歷史告警查詢界面查看電力系統(tǒng)信息 SCADA 事件 點(diǎn) 集不刷新與點(diǎn)集恢復(fù)刷新的告警。 點(diǎn)集不刷新 42. 點(diǎn)集恢復(fù)刷新 周 巡檢項(xiàng)目 1. 告警查詢： 查詢自動(dòng)化信息所有歷史告警； 查詢電力系統(tǒng)所有歷史告警； 查詢前置信息所有歷史告警。 自動(dòng)化信息 2. 電力系統(tǒng) 3. 前置信息 4. 自動(dòng)備份： 查看 自動(dòng)備份目錄下本周備份是否生成（ /users/ems/open2020e/var/DB_BACKUP下按日期生成備份目錄）； 如果備份目錄分區(qū) 80%，將備份目錄備份到磁帶等介質(zhì)后刪除。 5. 商用庫表空間： OPEN_SAMPLE_INDEX 故障診斷與恢復(fù)參考手冊 29 6. 在運(yùn)行 DB_SERVICE 應(yīng)用服務(wù)器上使用 manager_studio商用庫狀態(tài)監(jiān)視工具 進(jìn)行表空間的檢查。 注意： WEB 側(cè)的商用庫也要進(jìn)行檢查。 OPEN_SAMPLE 7. OPEN_INDEX 8. OPEN_DATA 9. OPEN_CASE 10. OPEN_ROLL 11. 日志查看： 查看所有服務(wù)器操作系統(tǒng)日志； 2 、 查 看 本 周 出 現(xiàn) 故 障 服 務(wù) 器 的OPEN3000 日志； 查看 ORACLE 日志。