【文章內(nèi)容簡介】 operation:invalid_process_id failed with status: 03 ORA27301: OS failure message: Error 03 ORA27302: failure occurred at: skgpalive13 ORA01555 caused by SQL statement below (Query Duration=1792 sec, SCN: ):3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA01555 caused by SQL statement below (Query Duration=12189 sec, SCN: ):3 ORA01555 caused by SQL statement below (Query Duration=11985 sec, SCN: ):3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA1652: unable to extend temp segment by 128 in tablespace TEMP 3 ORA01555 caused by SQL statement below (Query Duration=64 sec, SCN: ):3 ORA01555 caused by SQL statement below (Query Duration=497 sec, SCN: ):3 ORA000060: Deadlock detected. More info in file /oracle/app/oracle/admin/gdobs/udump/.3 ORA1652: unable to extend temp segment by 8192 in tablespace OBS_DATA3 ORA1653: unable to extend table by 8192 in tablespace OBS_DATA 3 ORA1653: unable to extend table by 8192 in tablespace OBS_DATA 3 ORA1653: unable to extend table by 8192 in tablespace OBS_DATA 3 ORA1653: unable to extend table by 8192 in tablespace OBS_DATA 3 從上面內(nèi)容來看現(xiàn)場數(shù)據(jù)庫需要監(jiān)控一下表空間大小，之前多次出現(xiàn)過表空間滿的現(xiàn)象。建議現(xiàn)網(wǎng)工程師加強(qiáng)對 oracle 數(shù)據(jù)庫表空間的監(jiān)控、管理。第 11 頁 共 5 頁3 表空間3 目的 3 Oracle 數(shù)據(jù)庫表空間監(jiān)控3 對應(yīng)服務(wù)器3 看上面列表3 操作步驟3 查看表空間：3 SELECT UPPER() 表空間名, 3 表空間大小(M), 3 已使用空間(M), 3 TO_CHAR(ROUND(( ) / * 100,2),39。39。) 使用比, 3 空閑空間(M), 3 最大塊(M) 3 FROM (SELECT TABLESPACE_NAME, 3 ROUND(SUM(BYTES) / (1024 * 1024), 2) TOTAL_BYTES, 3 ROUND(MAX(BYTES) / (1024 * 1024), 2) MAX_BYTES 3 FROM 3 GROUP BY TABLESPACE_NAME) F, 3 (SELECT , 3 ROUND(SUM() / (1024 * 1024), 2) TOT_GROOTTE_MB 3 FROM DD 3 GROUP BY ) D 3 WHERE = 3 ORDER BY 4 DESC。第 12 頁 共 5 頁3 結(jié)果如下：3 表空間名 表空間大小(M) 已使用空間(M) 使用比 空閑空間(M) 最大塊(M)3 3 OBS_DATA 264208 39683 OBS_USER 24316 39683 OBS_INDEX2 127984 20273 UNDOTBS1 998 28953 SYSTEM 998 3 OBS_STAT 998 3 OBS_CFG 998 3 OBS_INDEX1 1998 3 OBS_INDEX3 1998 3 PERFSTAT 998 .06 33 結(jié)果 3 OBS_DATA 使用已經(jīng)達(dá)到 91%，與本地工程師溝通得知目前現(xiàn)網(wǎng)只保留了兩個月的話單數(shù)據(jù)，在這種情況下 OBS_DATA 表空間使用率還如此之高，建議應(yīng)該考慮對OBS_DATA 表空間進(jìn)行一定的擴(kuò)展。查看 alter 日志發(fā)現(xiàn)以前出現(xiàn)過 OBS_DATA 表空間滿的情況，所以建議本地工程師經(jīng)查檢查，或者開發(fā)腳本進(jìn)行監(jiān)控。其他表空間使用量不是很大暫時不需要監(jiān)控。3 另外，開發(fā)監(jiān)控腳本時，建議將 OBS_USER 一起進(jìn)行監(jiān)控，因為該表空間比較重要，滿了以后會影響現(xiàn)網(wǎng)帳號受理業(yè)務(wù)。3第 13 頁 共 5 頁3 連接數(shù)33 目的 3 檢查數(shù)據(jù)庫連接數(shù)是否正常3 對應(yīng)服務(wù)器3 看上面列表3 操作步驟3 stat an|grep 1521|grep ESTABLISHED|wc l3 1973 查看 oracle 設(shè)置的最大 session 數(shù)3 SQL show parameter sessions。3 NAME TYPE VALUE3 3 java_max_sessionspace_size integer 03 java_soft_sessionspace_limit integer 03 license_max_sessions integer 03 license_sessions_warning integer 03 logmnr_max_persistent_sessions integer 13 mts_sessions integer 8803 sessions integer 8853 shared_server_sessions integer 8803 查看數(shù)據(jù)庫當(dāng)前會話的連接數(shù)：3 SQL select count(*) from v$session。3 COUNT(*)第 14 頁 共 5 頁3 3 2103 結(jié)果 3 Oracle 設(shè)置的最大 session 數(shù)量是 885，oracle 當(dāng)前會話數(shù)是 210，沒有異常。33 日志文件大小3 目的 3 查看數(shù)據(jù)庫日志文件和監(jiān)聽文件大小是否超過 2G3 對應(yīng)服務(wù)器3 看上面列表3 操作步驟3 查看 oracle 的 日志大小：3 cd /data2/oracle/work/log3 % Newdb2[oracle:/data2/oracle/work/log]=du sh *3 90425091(字節(jié)) 3 411677(字節(jié)) 3 查看 alert 日志大?。? Cd /oracle/app/oracle/admin/gdobs/bdump3 [39] % ls l 3 85624121(字節(jié)) 3 結(jié)果 3 數(shù)據(jù)庫 alert 日志和監(jiān)聽日志都比較小，沒有異常33 數(shù)據(jù)庫備份情況3 目的 3 查看數(shù)據(jù)庫備份和恢復(fù)功能是夠正常第 15 頁 共 5 頁3 對應(yīng)服務(wù)器3 看上面列表3 操作步驟3 查看 crontab3 30 6 * * * cd /databak。./ /databak/ 2amp。13 結(jié)果 3 Aiobs 應(yīng)用數(shù)據(jù)庫通過備份腳本每天早上 6 點(diǎn) 30 分將數(shù)據(jù)庫中所有 obs 應(yīng)用相關(guān)表通過 export 進(jìn)行備份，備份沒問題。333 認(rèn)證系統(tǒng)radius巡檢目的 檢查應(yīng)用系統(tǒng)服務(wù)進(jìn)程是否正常運(yùn)行對應(yīng)服務(wù)器 看上面列表檢查項 磁盤空間，進(jìn)程，備份，監(jiān)控，配置文件，crontab操作步驟 磁盤空間：df –hk 進(jìn)程： ps ef | grep radius ps ef | grep x_agent 各地市配置文件對比 檢查日志，detail，idr 情況并分析應(yīng)用程序日志內(nèi)容：cd radius/logcd log/scs 監(jiān)控：crontab –l 主要查看備份，日志壓縮，日志轉(zhuǎn)移等情況 檢查各地市配置文件中可能存在隱患的配置項1)檢查 LMFailure=Deny 的服務(wù)模板，并列出來。2)檢查 Default=Yes 的服務(wù)模板，看下默認(rèn)的服務(wù)模板是不是在每個 Services 的最后3)檢查 AuthenWay 的配置中 DatabaseAuthen=No 的配置項4)Authens 項中有亞信私有屬性的配置radius 配置文件檢查請見結(jié)果 太陽城節(jié)點(diǎn)：radius1tyc/obs6nod:obs6nod: df hk文件系統(tǒng) 大小 用了 可用 容量 掛接在/dev/dsk/c0t38835192807D7E6Cd0s0 616M 7% //devices 0K 0K 0K 0% /devicesctfs 0K 0K 0K 0% /system/contractproc 0K 0K 0K 0% /procmnttab 0K 0K 0K 0% /etc/mnttab第 16 頁 共 5 頁swap 137G 137G 1% /etc/svc/volatileobjfs 0K 0K 0K 0% /system/obje