【正文】 路由中。了解故障原因之前不要輕易嘗試操作，不正確的操作會導(dǎo)致問題擴大。組網(wǎng)圖三、 業(yè)務(wù)中斷故障和業(yè)務(wù)恢復(fù)下面介紹業(yè)務(wù)中斷故障的應(yīng)急處理流程。NE01與NE02之間的Tunnel創(chuàng)建失敗，但NE03與NE02之間可以正常創(chuàng)建Tunnel，因此可以判斷故障發(fā)生在DSLAM或與及對接的鏈路上。示例：以下面的示例說明排除法的思路。 排除法在處理業(yè)務(wù)故障時，可以首先檢查與其它業(yè)務(wù)的共用路由部分是否存在故障。另外，光接口在硬件環(huán)回時要避免接收光功率過載。若通過尾纖將光口自環(huán)后，業(yè)務(wù)測試正常，則可確定該單板是好的。比如在單站測試時，配置光口為內(nèi)環(huán)回，即使業(yè)務(wù)測試正常，也不能確定該單板的接口模塊沒有問題。設(shè)備維護人員應(yīng)熟練掌握?？稍賹ζ渌W(wǎng)元進行測試。根據(jù)網(wǎng)絡(luò)分析儀上顯示的丟包率結(jié)果，可判定是否由于NE的丟包過多導(dǎo)致業(yè)務(wù)中斷。圖 某網(wǎng)絡(luò)的業(yè)務(wù)中斷，需要對設(shè)備故障進行逐一排查。如最大線速、數(shù)據(jù)流量、幀長、吞吐量、丟包率及網(wǎng)絡(luò)延時等。D. 電纜測試儀：用于測試電纜的端子對在最大額定電流下的電壓降，從而可推斷電纜的連通情況和傳輸質(zhì)量。一般是將需要測試的通道進行環(huán)回，通過誤碼儀發(fā)送偽隨機碼，并在誤碼儀上查看所測試到的通道誤碼情況。如設(shè)備接地電壓、電源電壓等。 儀表測試分析法儀表測試分析法一般用于定位設(shè)備的外部問題及其它設(shè)備的對接問題。 216。 216。 216。 216。 216。 3. 檢查Tunnel兩端網(wǎng)元上的參數(shù)配置是否匹配，是否選擇了正確的端口。 216。 216。 216。 216。 對于以太網(wǎng)端口，確認(rèn)端口是否已使能。端口參數(shù)配置錯誤是現(xiàn)網(wǎng)中導(dǎo)致故障最常見的原因之一。1. 檢查網(wǎng)元的網(wǎng)元ID、網(wǎng)元IP、LSR ID等參數(shù)是否配置正確。當(dāng)PTN設(shè)備與第三方設(shè)備對接時，由于兩端的某些參數(shù)默認(rèn)取值不一致，要特別注意兩端參數(shù)的匹配問題。當(dāng)Tunnel或業(yè)務(wù)創(chuàng)建后不通，或在網(wǎng)管上修改部分參數(shù)后業(yè)務(wù)突然中斷時，可以使用配置數(shù)據(jù)分析法來定位故障。5) 根據(jù)相應(yīng)的“LSP缺陷類型”，選擇清除告警，檢查光纖連接或確認(rèn)端口、Tunnel、業(yè)務(wù)的配置參數(shù)等方法，排除故障。4) 查看“LSP狀態(tài)”，正常情況如下表所示。在彈出的“操作結(jié)果”對話框中單擊“關(guān)閉”。1) 進入“網(wǎng)元管理器”，在功能樹中選擇“配置 MPLS管理 單播Tunnel管理”。E、OAM應(yīng)用業(yè)務(wù)中斷或業(yè)務(wù)出現(xiàn)丟包、誤碼時，可按照所示的流程運用OAM功能，定位故障。5) 在“測試結(jié)果”區(qū)域分析PW Ping測試結(jié)果。3) 重復(fù)步驟1和步驟2，在PW另一端的網(wǎng)元上，使能OAM功能，并保證兩端網(wǎng)元的參數(shù)設(shè)置一致。2) 在“PW OAM參數(shù)”選項卡中，使能PW的“OAM狀態(tài)”，設(shè)置“檢測報文類型”和“檢測報文周期”，單擊“應(yīng)用”。如果發(fā)送報文數(shù)量等于接收報文數(shù)量，且丟包率為0，則該Tunnel的連通性正常。在彈出的“Ping測試”對話框中設(shè)置相應(yīng)的參數(shù)，單擊“啟動測試”。3) 重復(fù)步驟1和步驟2，在Tunnel另一端的網(wǎng)元上，使能OAM功能，并保證兩端網(wǎng)元的參數(shù)設(shè)置一致。2) 在“OAM參數(shù)”選項卡中，使能Tunnel的“OAM狀態(tài)”，設(shè)置“檢測報文類型”和“檢測報文周期”，單擊“應(yīng)用”。對Tunnel和PW執(zhí)行Ping測試，通過計算OAM報文丟包率，判斷Tunnel和PW的連通性。l 規(guī)劃整改，擴容變化多。l 組網(wǎng)復(fù)雜。A、OAM簡介OAM主要應(yīng)用于PTN設(shè)備組網(wǎng)的網(wǎng)絡(luò)側(cè)（NNI側(cè)），該區(qū)域具有以下特點：l 網(wǎng)元多。 OAM分析法OAM機制可以有效地檢測、確認(rèn)并定位出源于MPLS層網(wǎng)絡(luò)內(nèi)部的缺陷和網(wǎng)絡(luò)性能的監(jiān)控。 示例：兩個網(wǎng)元之前配置了兩條Tunnel，但僅在一端網(wǎng)元上配置了APS保護組，導(dǎo)致ATM業(yè)務(wù)質(zhì)量很差。 178。178。業(yè)務(wù)PWIP/GRE TunnelMPLS TunnelRMON性能統(tǒng)計表對象判斷標(biāo)準(zhǔn)物理單板/端口 RMON性能：下表區(qū)分不同的“對象”，列出RMON性能統(tǒng)計的判斷標(biāo)準(zhǔn)。 178。178。IP/GRE TunnelTunnel沒有丟包。 對于端口，應(yīng)沒有誤碼。 對于單板，其光功率、工作溫度、CPU/內(nèi)存占用率應(yīng)在正常范圍之內(nèi)。表 判斷單板、端口、Tunnel、PW的性能統(tǒng)計數(shù)據(jù)是否正常，可以判斷是否存在故障。解除該環(huán)回后，故障徹底排除。分析全網(wǎng)告警，發(fā)現(xiàn)某個UNI端口在上報FLOW_OVER告警的同時，該端口的歷史告警ETH_LOS自動清除。某復(fù)雜環(huán)型拓?fù)浣M網(wǎng)突發(fā)廣播風(fēng)暴，各網(wǎng)元均出現(xiàn)大量FLOW_OVER告警，業(yè)務(wù)中斷。清除告警后，業(yè)務(wù)恢復(fù)正常，故障排除。 故障現(xiàn)象：NE1和NE2之間的ELine業(yè)務(wù)中斷，NE2上報ETH_LOS告警。示例一：簡單組網(wǎng)中，一般情況下清除告警的同時，故障也隨之排除。在維護過程中，對某網(wǎng)元重下配置后，應(yīng)特別注意將該網(wǎng)元的當(dāng)前時間與網(wǎng)管時間同步。通過U2000獲取告警信息時，應(yīng)注意保證網(wǎng)絡(luò)中各網(wǎng)元的當(dāng)前時間與網(wǎng)管時間同步。 網(wǎng)元側(cè)歷史告警 178。通過U2000查詢告警：只要在U2000主拓?fù)涞木W(wǎng)元圖標(biāo)上點擊右鍵，就可以查詢以下告警信息：178。當(dāng)設(shè)備發(fā)生故障時，一般會伴隨大量的告警。本節(jié)介紹各類分析和定位故障的方法、應(yīng)用場景和應(yīng)用示例。保證PTN網(wǎng)絡(luò)的穩(wěn)定運行，盡量減少突發(fā)事故。下面將對這三個部分進行詳細(xì)說明?；葜莨揪W(wǎng)絡(luò)維護中心 2010年12月目錄一、 概述 4二、 網(wǎng)絡(luò)故障分析定位方法 4 告警分析法 4 性能統(tǒng)計分析法 5 OAM分析法 7 配置數(shù)據(jù)分析法 11 儀表測試分析法 12 環(huán)回法 13 排除法 14三、 業(yè)務(wù)中斷故障和業(yè)務(wù)恢復(fù) 15 流程圖 15 查詢誤操作 17 檢查告警 17 檢查環(huán)回和裝載 18 檢查業(yè)務(wù)配置 18 應(yīng)急恢復(fù)方案 18 倒換 19 復(fù)位 19 通過更換單板恢復(fù)業(yè)務(wù) 19四、 常見故障處理方法 20 帶內(nèi)DCN故障處理 20 MPLS Tunnel故障處理 24 PW故障處理 26 CES業(yè)務(wù)故障處理 27 以太網(wǎng)業(yè)務(wù)故障處理 31 offload故障處理 35 時鐘故障處理 37 QoS故障處理 39 線性MSP故障處理 42 TPS故障處理 45 LAG故障處理 48 MPLS APS故障處理 51五、部件更換注意事項 55 部件分類說明 56 更換處理板 57 更換子卡 59 更換接口板 60 更換XCS單板 61 更換帶有1+1保護的SCA單板 63 更換沒有1+1保護的SCA單板 65 更換風(fēng)扇板 68 更換PIU板 69 更換可插拔光模塊 70 更換CF卡 71一、 概述PTN網(wǎng)絡(luò)故障處理在日常維護中顯得至關(guān)重要，為了更好的開展PTN網(wǎng)絡(luò)的日常維護，特編制PTN網(wǎng)絡(luò)故障處理手冊。本手冊PTN設(shè)備故障處理主要涉及故障分析定位、業(yè)務(wù)中斷故障應(yīng)急恢復(fù)、常見故障處理方法等三個部分。二、 網(wǎng)絡(luò)故障分析定位方法根據(jù)現(xiàn)網(wǎng)中處理網(wǎng)元脫管或業(yè)務(wù)中斷等故障的經(jīng)驗，一般遵循“一分析，二倒換/復(fù)位，三換板”的處理方案。處理故障時，應(yīng)從分析故障現(xiàn)象開始，盡快定位到故障的原因。 告警分析法告警分析法是定位故障的常用方法之一。通過對告警的分析，可大概判斷出發(fā)生故障的類型和位置。 當(dāng)前告警 178。 網(wǎng)管側(cè)歷史告警 通過分析、定位告警產(chǎn)生的原因，清除告警，并排除故障。倘若網(wǎng)元當(dāng)前時間與網(wǎng)管時間不同步，將導(dǎo)致信息上報錯誤。否則網(wǎng)元會工作在缺省時間里，而缺省時間并不是當(dāng)前時間。如下圖所示的鏈路圖中，網(wǎng)管計算機連接到NE2。故障分析定位：排查ETH_LOS告警產(chǎn)生的可能原因，最終定位出業(yè)務(wù)中斷故障的原因。示例二：復(fù)雜組網(wǎng)中，通過分析新增告警和已清除的歷史告警，可以找出排除故障的關(guān)鍵所在。雖然通過斷開環(huán)路光纖等方法恢復(fù)了業(yè)務(wù)，清除了FLOW_OVER告警,但無法定位出故障原因。沿此線索，發(fā)現(xiàn)與該UNI端口對接的第三方設(shè)備上出現(xiàn)了遠(yuǎn)端環(huán)回，導(dǎo)致網(wǎng)絡(luò)上出現(xiàn)環(huán)路。 性能統(tǒng)計分析法性能統(tǒng)計分析法通過統(tǒng)計“當(dāng)前性能”和“RMON性能”來分析和定位故障。當(dāng)前性能：下表區(qū)分不同的“對象”，列出當(dāng)前性能統(tǒng)計的判斷標(biāo)準(zhǔn)。當(dāng)前性能統(tǒng)計表對象判斷標(biāo)準(zhǔn)物理單板/端口 MPLS TunnelTunnel沒有丟包。以太網(wǎng)業(yè)務(wù)OAM沒有丟包。 開啟網(wǎng)元當(dāng)前性能統(tǒng)計功能。 網(wǎng)元支持的當(dāng)前性能的具體含義和解釋。表 對于主控板，CPU占用率不應(yīng)過高。 對于端口，發(fā)送/接收方向有計數(shù)。 發(fā)送/接收方向有計數(shù)。 沒有丟包。 發(fā)送/接收方向有計數(shù)。 沒有丟包。 PW的發(fā)送/接收方向有計數(shù)。 沒有丟包、亂序包、誤碼等異常統(tǒng)計。 Tunnel是雙向的，可以在“對象”中選擇正向Tunnel或反向Tunnel。 網(wǎng)元支持的RMON性能的具體含義和解釋。在網(wǎng)管上查詢該ATM業(yè)務(wù)的RMON性能，發(fā)現(xiàn)存在亂序包計數(shù)，且亂序包計數(shù)值約為接收信元計數(shù)的50%，由此判斷業(yè)務(wù)出現(xiàn)雙收，并找到問題的原因所在。設(shè)備可以利用OAM的檢測狀態(tài)來觸發(fā)保護倒換，實現(xiàn)快速故障檢測和業(yè)務(wù)保護。一條MPLS LSP往往經(jīng)過多個網(wǎng)元?？赡苄枰┩ǖ谌骄W(wǎng)絡(luò)，存在很多導(dǎo)致故障的不確定因素。B、OAM分類分析定位故障時常用的OAM功能主要是Tunnel OAM和PW OAM兩種。C、執(zhí)行LSP Ping測試1) 進入“網(wǎng)元管理器”，在功能樹中選擇“配置 MPLS管理 單播Tunnel管理”。在彈出的“操作結(jié)果”對話框中單擊“關(guān)閉”。4) 右鍵單擊“節(jié)點類型”為“Ingress”的Tunnel，在彈出的下拉菜單中選擇“Ping測試”。5) 在“測試結(jié)果”區(qū)域分析Ping測試結(jié)果。D、執(zhí)行PW Ping測試1) 進入“網(wǎng)元管理器”，在功能樹中選擇“配置 MPLS管理 PW管理”。在彈出的“操作結(jié)果”對話框中單擊“關(guān)閉”。4) 右鍵單擊PW，在彈出的下拉菜單中選擇“Ping測試”，在彈出的“Ping測試”對話框中設(shè)置相應(yīng)的參數(shù)，單擊“啟動測試”。如果發(fā)送報文數(shù)量等于接收報文數(shù)量，且丟包率為0，則該PW的連通性正常。F、OAM分析業(yè)務(wù)故障流程圖圖 OAM分析業(yè)務(wù)故障流程圖G、OAM定位故障通過在Tunnel的兩端網(wǎng)元上使能OAM并查看LSP狀態(tài)，可以輕易定位到存在故障的網(wǎng)元。2) 在“OAM參數(shù)”選項卡中，為Tunnel設(shè)置合適的“檢測報文類型”和“檢測報文周期”，使能“OAM狀態(tài)”，單擊“應(yīng)用”。3) 選中一條或多條Tunnel，右鍵點擊，在彈出的下拉菜單中選擇“查詢LSP狀態(tài)”。Tunnel節(jié)點類型LSP狀態(tài)Ingress遠(yuǎn)端可用狀態(tài)Egress近端可用狀態(tài)若出現(xiàn)其它狀態(tài)時，根據(jù)“LSP缺陷位置”可定位到出現(xiàn)故障的網(wǎng)元。 配置數(shù)據(jù)分析法配置數(shù)據(jù)分析法通過在網(wǎng)管上分析業(yè)務(wù)的參數(shù)配置，找到配置錯誤的參數(shù)，從而定位故障。一般情況下，對照網(wǎng)元規(guī)劃表即可找出網(wǎng)元上配置錯誤的參數(shù)。采用配置數(shù)據(jù)分析法時，一般可遵循以下步驟。 2. 對照網(wǎng)元規(guī)劃表，檢查端口狀態(tài)和參數(shù)配置。 216。檢查“端口模式”、“封裝類型”、“工作模式”、“TAG標(biāo)識”、“缺省VLAN ID”、“Tunnel使能狀態(tài)”、“IP地址”等參數(shù)是否配置正確。 對于SDH端口，檢查“端口模式”、“封裝類型”、“通道化”、“端口類型”、“Tunnel使能狀態(tài)”、“時鐘模式”等參數(shù)是否配置正確。 對于PDH端口，檢查“端口模式”、“封裝類型”、“幀格式”、“阻抗”、“幀模式”等參數(shù)是否配置正確。 對于IMA組，檢查“協(xié)議版本”、“最小激活鏈路數(shù)”、“協(xié)議使能狀態(tài)”、“時鐘模式”、“E1幀模式”、“E1時隙數(shù)”、“ATM信元載荷加擾”、“VPI”、“VCI”等相關(guān)參數(shù)是否配置正確。 對于第三方設(shè)備的端口，需要確認(rèn)以太網(wǎng)端口工作模式、VC12線序模式或時鐘模式是否與PTN設(shè)備匹配。 4. 檢查以下PW參數(shù)配置。 PW ID是否正確。 PW是否已使能。 PW的出入標(biāo)簽是否一致。 PW是否選擇了正確的端口或Tunnel。 對于CES業(yè)務(wù)，確認(rèn)“報文裝載時間”和“抖動緩沖時間”是否配置正確。定位故障的常用儀表主要有以下幾種：A. 萬用表：根據(jù)不同需要可以將萬用表調(diào)制電壓檔或電阻檔，對懷疑的故障點進行電壓或電阻測試。B. 誤碼儀：用于測試傳輸通道中存在的誤碼情況，如誤碼數(shù)、誤碼率、誤碼秒等。C. 光功率計：用于測試單板的接收和發(fā)送光功率。E. 網(wǎng)絡(luò)分析儀：用于網(wǎng)絡(luò)性能的測試和分析，測試內(nèi)容較豐富。示例：以網(wǎng)絡(luò)分析儀定位故障為例說明儀表測試法的思路。按下圖所示，將網(wǎng)絡(luò)分析儀與設(shè)備正確連接，同時在NE上進行內(nèi)環(huán)回，對NE進行丟包率的測試。網(wǎng)絡(luò)分析儀和設(shè)備的連接 對網(wǎng)絡(luò)分析儀進行正確的設(shè)置，向NE發(fā)送數(shù)據(jù)包。如果數(shù)據(jù)正常，可確定NE工作正常。 環(huán)回法環(huán)回法是定位故障時常用而且行之有效的一種方法，可以將故障盡可能準(zhǔn)確地定位到單站。環(huán)回操作分為軟件環(huán)回和硬件環(huán)回，這兩種方式各有所長：A. 軟件環(huán)回即在U2000上配置環(huán)回，操作方便，但定位故障的范圍和位置不夠準(zhǔn)確。B. 硬件環(huán)回即使用光纖或者電纜環(huán)回端口，相對于軟件環(huán)回而言環(huán)回更為徹底。但硬件環(huán)回需要到設(shè)備現(xiàn)場才能進行操作。環(huán)回操作會中斷端口上其它正常運行的業(yè)務(wù)，在使用前請務(wù)必做好確認(rèn)。排除運行正常的部分，以縮小故障定位的范圍。如下圖所示。圖 流程圖下面首先通過下圖對OptiX PTN 3900設(shè)備的應(yīng)急處理流程進行說明。說明： 在處理故障前，要進行業(yè)務(wù)調(diào)離。圖 如果存在誤操作，要根據(jù)故障發(fā)生前的操作情況進行逆向操作恢復(fù)業(yè)務(wù)。如果存在，應(yīng)先排除告警指示的故障。告警說明告警類型告警名稱告警說明設(shè)備類告警POWER_ABNORMAL電源失效FAN_FAIL風(fēng)扇故障會導(dǎo)致設(shè)備溫度增高，影響正常運行BD_STATUS單板不在位HARD_BAD單板硬件錯誤報告SYN_BAD