【正文】 第四步 在新一代上 ping 商戶和網(wǎng)控器上聯(lián)卡地址 網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗第六步 開啟分公司內(nèi)網(wǎng)主交換機(jī)_CNXXSW01001 電源： 網(wǎng)絡(luò)崗第七步 sh ip interface brief 查看端口情況sh vlan 查看是否還有與銀聯(lián)互連的設(shè)備信息sh run 查看當(dāng)前交換機(jī)配置情況sh ip route 查看相關(guān)路由網(wǎng)絡(luò)崗第八步 在新一代上 ping 商戶和網(wǎng)控器上聯(lián)卡地址 網(wǎng)絡(luò)崗第九步 交易測(cè)試 應(yīng)用崗 預(yù)期分析對(duì)于內(nèi)網(wǎng)核心交換機(jī)，正常情況下，交易在主交換機(jī)上傳輸數(shù)據(jù)，當(dāng)內(nèi)網(wǎng)備交換機(jī)設(shè)備故障時(shí)，不會(huì)影響交易；當(dāng)內(nèi)網(wǎng)主交換機(jī)設(shè)備出現(xiàn)故障后，HSRP 切換到備交換機(jī)為ACTIVE，也會(huì)引起防火墻的 failover 主、 備切換，交易也將切換到備交換設(shè)備工作，通過備防火墻、備交換機(jī)的線路傳輸交易數(shù)據(jù)，影響交易時(shí)間 40 秒左右。4） 交換機(jī)狀態(tài)燈顯示紅色告警或熄滅。2） ping 不通。4） 檢查交換機(jī)狀態(tài)燈，顯示紅色告警或熄滅。網(wǎng)絡(luò)運(yùn)行崗：檢查交換機(jī)所有狀態(tài)燈，顯示有紅色告警或熄滅。4） 檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案2） 通過 ping ，ping 不通。 故障現(xiàn)象監(jiān)控崗位 故障詳細(xì)內(nèi)容運(yùn)行監(jiān)控崗 通過 NETCOOL 短信或者監(jiān)控界面中的紅色告警信息判斷設(shè)備故障。下圖為生產(chǎn)內(nèi)網(wǎng)核心交換機(jī)連接圖：商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案下圖為生產(chǎn)外網(wǎng)核心交換機(jī)連接圖： 主交換機(jī)設(shè)備故障首先排除線路的故障，如果確定為備用交換機(jī)設(shè)備整機(jī)出現(xiàn)故障故障，需要將備交換機(jī)上連接的主機(jī)切換到主交換機(jī)相應(yīng)的端口。 演練步驟步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 在分公司新一代上 ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第二步 關(guān)閉分公司內(nèi)網(wǎng)主路由器_CNXXRT01001 電源 網(wǎng)絡(luò)崗第三步 sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與銀聯(lián)互連的設(shè)備信息sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至備線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗第六步 開啟分公司內(nèi)網(wǎng)主路由器_CNXXRT01001 電源 網(wǎng)絡(luò)崗第七步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第八步 交易測(cè)試 應(yīng)用崗 預(yù)期分析正常情況下，去銀聯(lián)/總公司的路由會(huì)通過主線路傳輸數(shù)據(jù)，同時(shí)通過 cdp 能看到與 總公司 /銀聯(lián)的網(wǎng)絡(luò)設(shè)備鄰接關(guān)系，當(dāng)設(shè)備出現(xiàn)故障后，去總 公司/銀聯(lián)的路由會(huì)切換到備線路工作，通過備線路傳輸數(shù)據(jù)，不會(huì)影響交易。4） 路由器狀態(tài)燈顯示紅色告警或熄滅。SYS/SYS PWR 正常為綠色， ACT 正常為綠色閃動(dòng)；當(dāng)狀態(tài)燈為黃色或紅色時(shí)故障2） ping 不通。商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案2） 通過 ping 路由器命令：ping 3） 使用控制線連接到路由器標(biāo)識(shí)有“console”的端口登陸。網(wǎng)絡(luò)運(yùn)行崗：檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。4） 檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。2） 通過 ping 路由器，ping 不通。 故障現(xiàn)象監(jiān)控崗位 故障詳細(xì)內(nèi)容運(yùn)行監(jiān)控崗 通過 NETCOOL 短信或者監(jiān)控界面中的紅色告警信息判斷設(shè)備故障。 結(jié)果分析切換后請(qǐng)記錄切換延時(shí)、丟包數(shù)、路徑狀態(tài)步驟 切換延時(shí) 丟包數(shù) 切換后路徑狀態(tài) 路由狀態(tài) 備注A路由正常切換到總公司主線切至備線B路由正常切換到總公司備線切至主線C路由正常切換到當(dāng)?shù)劂y聯(lián)主線切至備線D路由正常切換到當(dāng)?shù)劂y聯(lián)備線切至主線 應(yīng)急處理當(dāng)演練過程中出現(xiàn)不符合預(yù)期結(jié)果并造成交易長(zhǎng)時(shí)間無(wú)法恢復(fù)時(shí)，啟動(dòng)回退步驟：商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至當(dāng)?shù)劂y聯(lián)的主線路，并Interface XX No shutdown網(wǎng)絡(luò)崗第二步 在分公司網(wǎng)控器上聯(lián)卡上 ping 銀聯(lián)二代收單平臺(tái) 應(yīng)用崗第三步 sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與銀聯(lián)互連的設(shè)備信息sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗演練的結(jié)果如不符合預(yù)期，填寫下表問題現(xiàn)象原因分析解決方法 上聯(lián)到總公司/當(dāng)?shù)劂y聯(lián)網(wǎng)絡(luò)的設(shè)備接口模塊出現(xiàn)故障故障現(xiàn)象類似 線路故障，在此不多做描述，演練時(shí)可以跳步驟 操作內(nèi)容 操作崗位 預(yù)估用時(shí)第一步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至總公司的主線路，并_CNXXRT01001Interface XX No shutdown網(wǎng)絡(luò)崗第二步 登錄分公司新一代，長(zhǎng) ping 分公司網(wǎng)控器上聯(lián)卡 應(yīng)用崗第三步 _CNXXRT01001sh ip interface brief //查看端口情況sh cdp nei //查看是否還有與總公司互連的設(shè)備信息sh ip route //查看是否還有到總公司的相關(guān)路由sh run //查看當(dāng)前路由器配置情況網(wǎng)絡(luò)崗第四步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第五步 交易測(cè)試 應(yīng)用崗商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案過。 應(yīng)用崗第五步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至備線網(wǎng)絡(luò)崗第六步 交易測(cè)試 應(yīng)用崗第七步 登錄分公司內(nèi)網(wǎng)主路由器，在_CNXXRT01001 上，確認(rèn)至總公司的主線路，并_CNXXRT01001Interface XX No shutdown網(wǎng)絡(luò)崗第八步 在新一代上 traceroute 分公司網(wǎng)控器上聯(lián)卡，檢查路由是否已經(jīng)切換至主線網(wǎng)絡(luò)崗第九步 交易測(cè)試 應(yīng)用崗商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案sh ip route //查看是否還有銀聯(lián)的相關(guān)路由sh run //查看當(dāng)前路由器配置情況第四步 查看中斷切換時(shí)間，記錄長(zhǎng) ping 結(jié)果。判斷為：分公司生產(chǎn)內(nèi)網(wǎng)上聯(lián)路由器_CNXXRT01001 的通訊線路中斷。3） ping 失敗。1） tel 登錄成功。網(wǎng)絡(luò)運(yùn)行崗：檢查路由器所有狀態(tài)燈，顯示有紅色告警或熄滅。4） 通過在總公司下聯(lián)路由器上 sh ip int brie 顯示該分公司接口為 down down。2） 通過 ，ping 成功。 故障現(xiàn)象監(jiān)控崗位 故障詳細(xì)內(nèi)容運(yùn)行監(jiān)控崗 通過 NETCOOL 短信或者監(jiān)控界面中的紅色告警信息判斷設(shè)備故障。線路目前有兩種方式：專線、Ether。 參與人員名單演練角色 工作現(xiàn)場(chǎng) 實(shí)施人員 復(fù)核人員演練總指揮 分支機(jī)構(gòu)現(xiàn)場(chǎng)網(wǎng)絡(luò)崗一 總公司網(wǎng)絡(luò)崗二 分支機(jī)構(gòu)現(xiàn)場(chǎng)系統(tǒng)崗 總公司應(yīng)用崗 總公司環(huán)境崗 分支機(jī)構(gòu)現(xiàn)場(chǎng)測(cè)試崗一 分支機(jī)構(gòu)現(xiàn)場(chǎng)測(cè)試崗二 總公司演練步驟記錄崗 分支機(jī)構(gòu)現(xiàn)場(chǎng)支持廠商如宏天 分支機(jī)構(gòu)現(xiàn)場(chǎng) 演練完成后續(xù)工作商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案1)記錄演練實(shí)施過程及結(jié)果；2)系統(tǒng)狀態(tài)檢查及交易測(cè)試驗(yàn)證；3)通知當(dāng)?shù)劂y聯(lián)分公司、總公司及商戶；4)演練總指揮宣布演練結(jié)束。 實(shí)施時(shí)間現(xiàn)設(shè)定實(shí)施日期 2022 年 X 月 X 日為切換演練日，本次實(shí)施從 X 日 0:00 開始，以事先通知的方式進(jìn)行。綜上所述，某分支機(jī)構(gòu)生產(chǎn)系統(tǒng)切換演練將可能會(huì)對(duì)生產(chǎn)系統(tǒng)交易造成影響，如果以上相關(guān)準(zhǔn)備做好后， 風(fēng)險(xiǎn)是可控的。3 風(fēng)險(xiǎn)評(píng)估 分公司網(wǎng)絡(luò)設(shè)備現(xiàn)狀分公司網(wǎng)絡(luò)設(shè)備連接如下圖：商務(wù)分公司生產(chǎn)網(wǎng)絡(luò)切換演練實(shí)施方案 影響性評(píng)估如上圖所示，分子公司標(biāo)準(zhǔn)架構(gòu)的內(nèi)網(wǎng)路由器、內(nèi)網(wǎng)交換機(jī)、隔離區(qū)防火墻、外網(wǎng)交換機(jī)、網(wǎng)控器等均采用熱備組成設(shè)級(jí)高可用，單臺(tái)設(shè)備發(fā)生故障時(shí)，業(yè)務(wù)數(shù)據(jù)流將自動(dòng)切換到備用設(shè)備，生產(chǎn)交易不會(huì)出現(xiàn)長(zhǎng)時(shí)間中斷。2 演練范圍本切換演練方案包括分支機(jī)構(gòu)標(biāo)準(zhǔn)架構(gòu)生產(chǎn)網(wǎng)的所有設(shè)備，在網(wǎng)絡(luò)中可能遇到如下的故障：1. 生產(chǎn)內(nèi)網(wǎng)上聯(lián)路由器故障；2. 交換機(jī)故障；3. 隔離區(qū)防火墻故障；4. 生產(chǎn)外網(wǎng)下聯(lián)路由器故障