【文章內(nèi)容簡(jiǎn)介】 /2/0:1 Serial1/2/0:1 is down, line protocol is down。判斷為：分公司生產(chǎn)內(nèi)網(wǎng)上聯(lián)路由器_CNXXRT01001 的通訊線路中斷。 演練步驟首先進(jìn)行到總公司線路的切換演練：其次進(jìn)行到當(dāng)?shù)劂y聯(lián)線路的切換演練：步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 在分公司網(wǎng)控器上聯(lián)卡上 ping 銀聯(lián)二代收單平臺(tái) 應(yīng)用崗第二步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至當(dāng)?shù)劂y聯(lián)的主線路，并Interface XX shutdown網(wǎng)絡(luò)崗第三步 sh ip interface brief //查看端口情況 網(wǎng)絡(luò)崗步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 登錄分公司新一代，長(zhǎng) ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第二步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至總公司的主線路，并_CNXXRT01001Interface XX shutdown網(wǎng)絡(luò)崗第三步 _CNXXRT01001sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與總公司互連的設(shè)備信息sh ip route //查看是否還有到總公司的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 查看中斷切換時(shí)間，記錄長(zhǎng) ping 結(jié)果。 應(yīng)用崗第五步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至備線網(wǎng)絡(luò)崗第六步 交易測(cè)試 應(yīng)用崗第七步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至總公司的主線路，并_CNXXRT01001Interface XX No shutdown網(wǎng)絡(luò)崗第八步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第九步 交易測(cè)試 應(yīng)用崗銀聯(lián)商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案11sh cdp nei //查看是否還有與銀聯(lián)互連的設(shè)備信息sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況第四步 查看中斷切換時(shí)間，記錄長(zhǎng) ping 結(jié)果。第五步 在內(nèi)網(wǎng)交換機(jī)上 traceroute 銀聯(lián)二代收單平臺(tái)地址，檢查路由是否已經(jīng)切換至備線網(wǎng)絡(luò)崗第六步 交易測(cè)試 應(yīng)用崗第七步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至當(dāng)?shù)劂y聯(lián)的主線路，并Interface XX No shutdown網(wǎng)絡(luò)崗第八步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第九步 交易測(cè)試 應(yīng)用崗 預(yù)期分析 正常情況下，去銀聯(lián)/總公司的路由會(huì)通過主線路傳輸數(shù)據(jù)，同時(shí)通過 cdp 能看到與 總公司 /銀聯(lián)的網(wǎng)絡(luò)設(shè)備鄰接關(guān)系，當(dāng)主線路出現(xiàn)故障后，去總公司/銀聯(lián)的路由會(huì)切換到備線路工作，通過備線路傳輸數(shù)據(jù)，不會(huì)影響交易。 結(jié)果分析切換后請(qǐng)記錄切換延時(shí)、丟包數(shù)、路徑狀態(tài)步驟 切換延時(shí) 丟包數(shù) 切換后路徑狀態(tài) 路由狀態(tài) 備注A路由正常切換到總公司主線切至備線B路由正常切換到總公司備線切至主線C路由正常切換到當(dāng)?shù)劂y聯(lián)主線切至備線D路由正常切換到當(dāng)?shù)劂y聯(lián)備線切至主線 應(yīng)急處理當(dāng)演練過程中出現(xiàn)不符合預(yù)期結(jié)果并造成交易長(zhǎng)時(shí)間無法恢復(fù)銀聯(lián)商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案12時(shí)，啟動(dòng)回退步驟：步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至當(dāng)?shù)劂y聯(lián)的主線路，并Interface XX No shutdown網(wǎng)絡(luò)崗第二步 在分公司網(wǎng)控器上聯(lián)卡上 ping 銀聯(lián)二代收單平臺(tái) 應(yīng)用崗第三步 sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與銀聯(lián)互連的設(shè)備信息sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗演練的結(jié)果如不符合預(yù)期，填寫下表問題現(xiàn)象原因分析解決方法步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至總公司的主線路，并_CNXXRT01001Interface XX No shutdown網(wǎng)絡(luò)崗第二步 登錄分公司新一代，長(zhǎng) ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第三步 _CNXXRT01001sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與總公司互連的設(shè)備信息sh ip route //查看是否還有到總公司的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗銀聯(lián)商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案13 上聯(lián)到總公司/當(dāng)?shù)劂y聯(lián)網(wǎng)絡(luò)的設(shè)備接口模塊出現(xiàn)故障故障現(xiàn)象類似 線路故障，在此不多做描述，演練時(shí)可以跳過。 上聯(lián)到總公司/當(dāng)?shù)劂y聯(lián)網(wǎng)絡(luò)的設(shè)備出現(xiàn)故障如果上聯(lián)主路由器整機(jī)發(fā)生故障，應(yīng)及時(shí)聯(lián)系廠商提供備件到現(xiàn)場(chǎng)， 設(shè)備到位后，更 換 新設(shè)備并加電， 觀察路由器工作是否正常。 故障現(xiàn)象監(jiān)控崗位 故障詳細(xì)內(nèi)容運(yùn)行監(jiān)控崗 通過 NETCOOL 短信或者監(jiān)控界面中的紅色告警信息判斷設(shè)備故障。系統(tǒng)監(jiān)控崗網(wǎng)絡(luò)監(jiān)控崗1） 通過遠(yuǎn)程 tel 登陸故障路由器，tel 登錄失敗。2） 通過 ping 路由器，ping 不通。3） 使用 console 口登陸，登陸失敗。4） 檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。應(yīng)用支持崗運(yùn)行監(jiān)控崗：NETCOOL 告警信息如下如果出現(xiàn)紅色告警，并顯示節(jié)點(diǎn) 無法獲取分公司生產(chǎn)內(nèi)網(wǎng)上聯(lián)路由器信息則可能該路由器已經(jīng)出現(xiàn)故障。網(wǎng)絡(luò)運(yùn)行崗：檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。 故障研判監(jiān)控崗位 故障研判 預(yù)期結(jié)果運(yùn)行監(jiān)控崗 查看總公司監(jiān)控機(jī) cool 告警界面（ 發(fā)現(xiàn)紅色告警，顯示節(jié)點(diǎn) 無法獲取 XX 分公司生產(chǎn)內(nèi)網(wǎng)主路由器信銀聯(lián)商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案14息網(wǎng)絡(luò)監(jiān)控崗1） 通過遠(yuǎn)程 tel 登陸故障路由器命令：tel 2） 通過 ping 路由器命令：ping 3） 使用控制線連接到路由器標(biāo)識(shí)有“console”的端口登陸。4） 檢查路由器狀態(tài)燈，顯示紅色告警或熄滅。SYS/SYS PWR 正常為綠色， ACT 正常為綠色閃動(dòng)；當(dāng)狀態(tài)燈為黃色或紅色時(shí)故障1） tel 登錄失敗。2） ping 不通。3） console 口登陸失敗，無法顯示信息。4） 路由器狀態(tài)燈顯示紅色告警或熄滅。判斷為：分公司生產(chǎn)內(nèi)網(wǎng)上聯(lián)路由器_CNXXRT01001 宕機(jī)。 演練步驟步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 在分公司新一代上 ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第二步 關(guān)閉分公司內(nèi)網(wǎng)主路由器_CNXXRT01001 電源 網(wǎng)絡(luò)崗第三步 sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與銀聯(lián)互連的設(shè)備信息sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至備線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗第六步 開啟分公司內(nèi)網(wǎng)主路由器_CNXXRT01001 電源 網(wǎng)絡(luò)崗第七步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第八步 交易測(cè)試 應(yīng)用崗 預(yù)期分析正常情況下，去銀聯(lián)/總公司的路由會(huì)通過主線路傳輸數(shù)據(jù)，同時(shí)通過 cdp 能看到與 總公司 /銀聯(lián)的網(wǎng)絡(luò)設(shè)備鄰接關(guān)系，當(dāng)設(shè)備出現(xiàn)故障后，去總 公司/銀聯(lián)的路由會(huì)切換到備線路工作，通過備線路傳輸數(shù)據(jù)，不會(huì)影響交易。 結(jié)果分析切換后請(qǐng)記錄切換延時(shí)、丟包數(shù)、路徑狀態(tài)步驟 切換延時(shí) 丟包數(shù) 切換后路徑狀態(tài) 路由狀態(tài) 備注銀聯(lián)商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案15A路由正常切換主路由器切到備路由器B路由正常切換備路由器回切到主路由器 應(yīng)急處理當(dāng)演練過程中出現(xiàn)不符合預(yù)期結(jié)果并造成交易長(zhǎng)時(shí)間無法恢復(fù)時(shí)，啟動(dòng)回退步驟：步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 開啟分公司內(nèi)網(wǎng)主路由器_CNXXRT01001 電源 網(wǎng)絡(luò)崗第二步 在分公司新一代上 ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第三步 sh ip interface brief //查看端口情