【正文】 合組成員端口連接故障或丟失 252。MPLS APS常見故障現(xiàn)象一覽表現(xiàn)象上報(bào)告警單板APS保護(hù)組配置錯(cuò)誤或收不到APS幀，無法正常保護(hù)ETH_APS_PATH_MISMATCHEG16，EG8或EX2ETH_APS_LOSTETH_APS_SWITCH_FAILETH_APS_TYPE_MISMATCH工作Tunnel或保護(hù)Tunnel出現(xiàn)故障，倒換不成功MPLS_TUNNEL_LOCVMPLS_TUNNEL_MISMERGEMPLS_TUNNEL_MISMATCHMPLS_TUNNEL_ExcessMPLS_TUNNEL_SDMPLS_TUNNEL_SFMPLS_TUNNEL_UNKNOWNB. 故障處理流程圖圖 光纖或電纜連接錯(cuò)誤。 APS保護(hù)組兩端配置不一致 252。 若存在，清除ETH_APS_LOST或ETH_APS_SWITCH_FAIL告警。 檢查APS保護(hù)通道所在單板是否存在HARD_BAD、COMMUN_FAIL或BUS_ERR等硬件類告警，若存在，清除HARD_BAD、COMMUN_FAIL或BUS_ERR告警后，查看APS保護(hù)組是否能夠正常倒換。 檢查工作Tunnel或保護(hù)Tunnel是否存在表415中Tunnel級(jí)別的告警，若存在，則該Tunnel已失去保護(hù)能力，優(yōu)先清除該Tunnel存在的告警后，查看APS保護(hù)組是否能夠正常倒換。更換中l(wèi) 佩戴防靜電手腕或防靜電手套。對(duì)于無告警上報(bào)功能的單板，需檢查與之相連的設(shè)備業(yè)務(wù)運(yùn)行狀況。l 更換后的處理板將自動(dòng)與主控板進(jìn)行軟件匹配，若軟件版本不一致，則處理板需要從主控板更新軟件，直至與主控板側(cè)的軟件版本一致。B. 在U2000查詢并記錄待更換單板的當(dāng)前告警。7) 驗(yàn)證單板更換成功。操作步驟A. 對(duì)照產(chǎn)品版本配套表，確認(rèn)新子卡的名稱、版本和規(guī)格符合設(shè)備的要求。I. 在功能樹中選擇“配置 TPS保護(hù)”。P. 執(zhí)行TPS保護(hù)倒換。l 檢查更換后的新單板的STAT和SRV指示燈均長亮綠色。如存在不匹配情況，請(qǐng)與華為全球技術(shù)支援中心聯(lián)系。當(dāng)XCS板發(fā)生故障或擴(kuò)容升級(jí)時(shí)，需要更換XCS板，保證網(wǎng)絡(luò)正常運(yùn)行。注意事項(xiàng)OptiX PTN 3900設(shè)備支持XCS單板不同版本之間的兼容替代，如下表所示。E. 若ACT指示燈不亮，說明該單板為保護(hù)板。K. 在彈出的對(duì)話框中單擊“確定”，完成操作。對(duì)系統(tǒng)的影響l 單板1+1保護(hù)時(shí)，正常倒換情況下，更換SCA板不會(huì)對(duì)業(yè)務(wù)造成影響。如果需要使能兼容單板的全部功能，需要在U2000上完成“替換板類型”的操作。F. 現(xiàn)場更換SCA板。6) 右鍵單擊更換的SCA單板槽位，選擇“替換板類型”。當(dāng)SCA板發(fā)生故障或擴(kuò)容升級(jí)時(shí)，需要更換SCA板，保證網(wǎng)絡(luò)正常運(yùn)行。雖然替換前后的單板版本不一致，但替換后的單板可以充當(dāng)原單板使用。E. 在左側(cè)的“功能樹”中選擇“安全 網(wǎng)元登錄管理”。5) 在U2000主拓?fù)渖想p擊更換SCA板的網(wǎng)元，彈出網(wǎng)元基本槽位圖。如果不是，則需要重新拔插單板或再次更換單板。E. 使用TN82SCA板替換TN81SCA板時(shí)，新TN82SCA板將在完成數(shù)據(jù)庫備份后自動(dòng)軟復(fù)位。K. 在彈出的對(duì)話框中單擊“確定”，完成操作。操作步驟A. 對(duì)照產(chǎn)品版本配套表，確認(rèn)新風(fēng)扇板的名稱、版本和規(guī)格符合設(shè)備的要求。5) 驗(yàn)證故障恢復(fù)。如存在不匹配情況，請(qǐng)與華為全球技術(shù)支援中心聯(lián)系。2) 查詢單板當(dāng)前告警，確認(rèn)原單板產(chǎn)生的告警已解除且無新告警產(chǎn)生。如存在不匹配情況，請(qǐng)與華為全球技術(shù)支援中心聯(lián)系。在插入新光模塊時(shí)，不允許光接口上連有尾纖。l 主控板上安裝有CF卡。B. 安裝新的CF卡，或?qū)⒉鹣碌腃F卡安裝在另一塊主控板上。更換CF卡，恢復(fù)設(shè)備的正常運(yùn)行。E. 通知現(xiàn)場維護(hù)人員，拆換光模塊。操作步驟A. 選取備件。1) 檢查更換后的新單板的PWRA和PWRB指示燈均亮綠色，且ALM指示燈不亮。對(duì)系統(tǒng)的影響PIU板采用1+1熱備份時(shí)，更換故障PIU板對(duì)業(yè)務(wù)沒有影響。3) 插入新的風(fēng)扇盒。當(dāng)風(fēng)扇板發(fā)生故障時(shí)，需要更換故障單板，保證設(shè)備正常散熱。I. 在U2000主拓?fù)渖想p擊更換SCA板的網(wǎng)元，彈出網(wǎng)元基本槽位圖。D. 說明:更換后的單板的PROG指示燈會(huì)處于綠色閃爍狀態(tài)，此時(shí)單板軟件加載中。驗(yàn)證單板更換成功。4) 可選: 使用兼容單板替換原單板后，只能充當(dāng)原單板使用。C. 查詢并記錄網(wǎng)元的當(dāng)前用戶，以備單板更換后恢復(fù)原登錄用戶數(shù)據(jù)。l 為保證設(shè)備正常運(yùn)行，單板更換后的30分鐘內(nèi)請(qǐng)不要對(duì)SCA板做任何操作。11) 查詢單板告警，確認(rèn)原單板產(chǎn)生的告警已清除且無新告警產(chǎn)生。如果需要使能兼容單板的全部功能，請(qǐng)進(jìn)行“替換板類型”操作，該操作不會(huì)影響業(yè)務(wù)。在U2000上對(duì)待更換SCA單板進(jìn)行1+1保護(hù)倒換。注意事項(xiàng)OptiX PTN 3900設(shè)備支持SCA單板不同版本之間的兼容替代，如下表所示。當(dāng)SCA板發(fā)生故障或擴(kuò)容升級(jí)時(shí)，需要更換SCA板，保證網(wǎng)絡(luò)正常運(yùn)行。I. 在U2000主拓?fù)渖想p擊更換XCS板的網(wǎng)元，彈出網(wǎng)元基本槽位圖。D. 若ACT指示燈亮綠色，說明該單板為當(dāng)前工作板，出于保護(hù)設(shè)備的目的，不建議直接更換該單板。l 當(dāng)兩塊XCS板均需要更換時(shí)，需要等待第一塊新XCS板進(jìn)入正常狀態(tài)后，才能更換另一塊XCS板。l 查詢單板當(dāng)前告警，確認(rèn)原單板產(chǎn)生的告警已解除且無新告警產(chǎn)生。對(duì)系統(tǒng)的影響被更換接口板上的業(yè)務(wù)將會(huì)中斷約兩分鐘。l 解除線性復(fù)用段保護(hù)倒換。N. 在“板位映射關(guān)系”中單擊“查詢 查詢倒換狀態(tài)”。G. 查詢待更換子卡是否發(fā)生了TPS保護(hù)倒換。對(duì)系統(tǒng)的影響l 如果子卡沒有配置TPS保護(hù)或線性復(fù)用段保護(hù)，更換子卡時(shí)業(yè)務(wù)將中斷約三分鐘。4) 在U2000主拓?fù)渖想p擊更換處理板的網(wǎng)元，彈出網(wǎng)元基本槽位圖。表 處理板兼容替代關(guān)系表支持兼容替代功能的處理板可被替代處理板TN82EG16TN81EG16操作步驟A. 對(duì)照產(chǎn)品版本配套表，確認(rèn)新單板的名稱、版本和規(guī)格符合設(shè)備的要求。當(dāng)處理板發(fā)生故障或擴(kuò)容升級(jí)時(shí)，需要更換單板，保證網(wǎng)絡(luò)正常運(yùn)行。 l 檢查單板指示燈閃爍狀況，確認(rèn)單板正常工作。l 通過網(wǎng)管查詢相關(guān)告警、性能事件。 178。 178。 檢查APS保護(hù)組是否存在ETH_APS_LOST或ETH_APS_SWITCH_FAIL告警。 工作Tunnel或保護(hù)Tunnel故障。 APS保護(hù)組兩端協(xié)議狀態(tài)未激活。清除設(shè)備上報(bào)的告警，故障也隨之排除。若存在，禁止遠(yuǎn)端環(huán)回，清除ETH_EFM_LOOPBACK告警。 聚合組成員端口工作模式設(shè)置為半雙工 252。 178。 若聚合組成員失效，則負(fù)載分擔(dān)模式下有可能因?yàn)閹挷粔驅(qū)е鲁掷m(xù)丟包。A. 故障現(xiàn)象處理LAG故障時(shí)，通常會(huì)遇到以下故障現(xiàn)象，如下表所示。 若存在，處理保護(hù)板的告警，或更換保護(hù)板。 再經(jīng)過“等待恢復(fù)時(shí)間”后，業(yè)務(wù)將自動(dòng)倒換回工作板，TPS恢復(fù)原保護(hù)狀態(tài)。 252。 保護(hù)板不在位或故障。 若TPS不能進(jìn)行保護(hù)倒換，工作板承載的業(yè)務(wù)將中斷。消除設(shè)備上報(bào)的告警，故障也隨之排除。 查詢系統(tǒng)是否有LPS_UNI_BI_M告警。 查詢系統(tǒng)當(dāng)前告警，是否有HARD_BAD或BD_STATUS告警，并確定上報(bào)告警的單板。 178。線性MSP故障處理流程圖C. 對(duì)系統(tǒng)的影響網(wǎng)絡(luò)中線性復(fù)用段不能保護(hù)，在應(yīng)該發(fā)生保護(hù)倒換時(shí)，全網(wǎng)無法進(jìn)入保護(hù)倒換狀態(tài)或保護(hù)倒換狀態(tài)錯(cuò)誤。 252。若不適用，重新配置新的策略。 178。 配置業(yè)務(wù)時(shí)選擇了錯(cuò)誤的QoS策略。 若單板的業(yè)務(wù)處理能力受限，部分業(yè)務(wù)可能得不到處理，會(huì)出現(xiàn)丟包或誤碼。 178。 QoS故障處理本節(jié)介紹QoS出現(xiàn)故障時(shí)的現(xiàn)象、對(duì)系統(tǒng)的影響、可能原因、排除該故障時(shí)需要的工具、注意事項(xiàng)以及處理步驟等。 外部時(shí)鐘源丟失252。 查詢系統(tǒng)是否有LTI告警。 178。 178。A. 故障現(xiàn)象處理時(shí)鐘故障時(shí)，通常會(huì)遇到以下故障現(xiàn)象，如下表所示。 252。 252。 查詢系統(tǒng)當(dāng)前告警，是否有HARD_BAD、TEMP_OVER、COMMUN_FAIL或BUS_ERR告警，并確定上報(bào)告警的單板。 原因4：端口配置了環(huán)回。以太網(wǎng)業(yè)務(wù)故障處理流程圖 C. 對(duì)系統(tǒng)的影響:網(wǎng)絡(luò)中以太網(wǎng)業(yè)務(wù)中斷、出現(xiàn)丟包或錯(cuò)包，若故障由于SCA或XCS單板造成，則可能影響設(shè)備接入的其它業(yè)務(wù)。 252。 252。 查詢系統(tǒng)是否有T_ALOS、UP_E1AIS或DN_E1AIS告警。光接口及光纖內(nèi)部的激光束會(huì)傷害眼睛。 處理板、接口板的接口接入的信號(hào)丟失或惡化。消除設(shè)備上報(bào)的告警后，故障也隨之排除表 檢查對(duì)端設(shè)備是否存在單板故障或網(wǎng)元復(fù)位等異常狀況。 檢查PW首末節(jié)點(diǎn)間物理鏈路是否正常，系統(tǒng)中是否存在HARD_BAD、LASER_MOD_ERR、R_LOS或ETH_LOS等告警。舉例如下： 167。 PW APS保護(hù)倒換失敗。 LDP會(huì)話創(chuàng)建失敗，PW創(chuàng)建不成功。 檢查對(duì)端設(shè)備是否存在單板故障或網(wǎng)元復(fù)位等異常狀況。如果是，需要重新規(guī)劃或刪除冗余的Tunnel。 178。 路由失敗252。 路由失敗。A. 故障現(xiàn)象:處理MPLS Tunnel的故障時(shí)，通常會(huì)遇到以下故障現(xiàn)象178。 觀察主控板的PROG指示燈是否處于綠燈閃爍狀態(tài)，若是，則主控板正處于復(fù)位狀態(tài)。 若帶內(nèi)DCN通信穿越了第三方網(wǎng)絡(luò)，需要檢查第三方網(wǎng)絡(luò)中是否存在端口環(huán)回、物理通道中斷等故障。 檢查網(wǎng)元的歷史告警中是否存在R_LOS、ETH_LOS或IN_PWR_ABN等告警。 檢查兩端端口的參數(shù)配置是否一致，例如以太網(wǎng)端口的工作模式。 178。 如果不能登錄，可以采用PC機(jī)直連設(shè)備的ETH端口。 故障網(wǎng)元主控板正在復(fù)位或發(fā)生了主備倒換，帶內(nèi)DCN報(bào)文得不到響應(yīng)。 接收信號(hào)丟失或接收光功率過低，無法提取DCN報(bào)文。 若承載帶內(nèi)DCN的物理通道故障，則會(huì)影響該物理通道上承載的其它業(yè)務(wù)。 178。 帶內(nèi)DCN故障處理本節(jié)介紹帶內(nèi)DCN出現(xiàn)故障時(shí)的現(xiàn)象、對(duì)系統(tǒng)的影響、可能原因、排除該故障時(shí)需要的工具、注意事項(xiàng)以及處理步驟等。 178。 通過更換單板恢復(fù)業(yè)務(wù)如果一時(shí)無法定位到故障原因，又沒有備用路由用于業(yè)務(wù)倒換，而且復(fù)位單板無效時(shí)，需要考慮更換單板。OptiX PTN 3900支持的業(yè)務(wù)級(jí)倒換類型有：APS保護(hù)倒換 線性復(fù)用段（LMSP）保護(hù)倒換如果由于保護(hù)倒換失敗導(dǎo)致業(yè)務(wù)中斷，可以刪除已失效的保護(hù)組，另行創(chuàng)建可正常運(yùn)行的新保護(hù)組，并將業(yè)務(wù)倒換到新的路徑上。 檢查環(huán)回和裝載檢查業(yè)務(wù)路由上是否設(shè)置了環(huán)回或通道未裝載。就是通過網(wǎng)管配置，將故障路由的業(yè)務(wù)倒換到可用路由中。示例：以下面的示例說明排除法的思路。比如在單站測試時(shí)，配置光口為內(nèi)環(huán)回，即使業(yè)務(wù)測試正常，也不能確定該單板的接口模塊沒有問題。圖 一般是將需要測試的通道進(jìn)行環(huán)回，通過誤碼儀發(fā)送偽隨機(jī)碼，并在誤碼儀上查看所測試到的通道誤碼情況。 216。 3. 檢查Tunnel兩端網(wǎng)元上的參數(shù)配置是否匹配，是否選擇了正確的端口。 216。當(dāng)PTN設(shè)備與第三方設(shè)備對(duì)接時(shí)，由于兩端的某些參數(shù)默認(rèn)取值不一致，要特別注意兩端參數(shù)的匹配問題。在彈出的“操作結(jié)果”對(duì)話框中單擊“關(guān)閉”。3) 重復(fù)步驟1和步驟2，在PW另一端的網(wǎng)元上，使能OAM功能，并保證兩端網(wǎng)元的參數(shù)設(shè)置一致。3) 重復(fù)步驟1和步驟2，在Tunnel另一端的網(wǎng)元上，使能OAM功能，并保證兩端網(wǎng)元的參數(shù)設(shè)置一致。l 組網(wǎng)復(fù)雜。 178。178。表 某復(fù)雜環(huán)型拓?fù)浣M網(wǎng)突發(fā)廣播風(fēng)暴，各網(wǎng)元均出現(xiàn)大量FLOW_OVER告警，業(yè)務(wù)中斷。在維護(hù)過程中，對(duì)某網(wǎng)元重下配置后，應(yīng)特別注意將該網(wǎng)元的當(dāng)前時(shí)間與網(wǎng)管時(shí)間同步。當(dāng)設(shè)備發(fā)生故障時(shí)，一般會(huì)伴隨大量的告警?；葜莨揪W(wǎng)絡(luò)維護(hù)中心 2010年12月目錄一、 概述 4二、 網(wǎng)絡(luò)故障分析定位方法 4 告警分析法 4 性能統(tǒng)計(jì)分析法 5 OAM分析法 7 配置數(shù)據(jù)分析法 11 儀表測試分析法 12 環(huán)回法 13 排除法 14三、 業(yè)務(wù)中斷故障和業(yè)務(wù)恢復(fù) 15 流程圖 15 查詢誤操作 17 檢查告警 17 檢查環(huán)回和裝載 18 檢查業(yè)務(wù)配置 18 應(yīng)急恢復(fù)方案 18 倒換 19 復(fù)位 19 通過更換單板恢復(fù)業(yè)務(wù) 19四、 常見故障處理方法 20 帶內(nèi)DCN故障處理 20 MPLS Tunnel故障處理 24 PW故障處理 26 CES業(yè)務(wù)故障處理 27 以太網(wǎng)業(yè)務(wù)故障處理 31 offload故障處理 35 時(shí)鐘故障處理 37 QoS故障處理 39 線性MSP故障處理 42 TPS故障處理 45 LAG故障處理 48 MPLS APS故障處理 51五、部件更換注意事項(xiàng) 55 部件分類說明 56 更換處理板 57 更換子卡 59 更換接口板 60 更換XCS單板 61 更換帶有1+1保護(hù)的SCA單板 63 更換沒有1+1保護(hù)的SCA單板 65 更換風(fēng)扇板 68 更換PIU板 69 更換可插拔光模塊 70 更換CF卡 71一、 概述PTN網(wǎng)絡(luò)故障處理在日常維護(hù)中顯得至關(guān)重要，為了更好的開展PTN網(wǎng)絡(luò)的日常維護(hù)，特編制PTN網(wǎng)絡(luò)故障處理手冊(cè)。 告警分析法告警分析法是定位故障的常用方法之一。倘若網(wǎng)元當(dāng)前時(shí)間與網(wǎng)管時(shí)間不同步，將導(dǎo)致信息上報(bào)錯(cuò)誤。示例二：復(fù)雜組網(wǎng)中，通過分析新增告警和已清除的歷史告警，可以找出排除故障的關(guān)鍵所在。當(dāng)前性能：下表區(qū)分不同的“對(duì)象”，列出當(dāng)前性能統(tǒng)計(jì)的判斷標(biāo)準(zhǔn)。以太網(wǎng)業(yè)務(wù)OAM沒有丟包。 對(duì)于主控板，CPU占用率不應(yīng)過高。 發(fā)送/接收方向有計(jì)數(shù)。 Tunnel是雙向的，可以在“對(duì)象”中選擇正向Tunnel或反向Tunnel。一條MPLS LSP往往經(jīng)過多個(gè)網(wǎng)元。在彈出的“操作結(jié)果”對(duì)話框中單擊“關(guān)閉”。在彈出的“操作結(jié)果”對(duì)話框中單擊“關(guān)閉”。2) 在“OAM參數(shù)”選項(xiàng)卡中，為Tunnel設(shè)置合適的“檢測報(bào)文類型”和“檢測報(bào)文周