【正文】 銀行異地災(zāi)備中心部分分行接入模擬演練方案（核心系統(tǒng)）1 演練目標(biāo)和原則本次演練模擬北京地區(qū)發(fā)生災(zāi)難導(dǎo)致我行生產(chǎn)環(huán)境不能對(duì)外提供服務(wù)，異地災(zāi)備中心接到災(zāi)難宣告后，按照災(zāi)難恢復(fù)預(yù)案中的相關(guān)切換手冊(cè)、腳本、流程，啟動(dòng)異地災(zāi)備中心核心系統(tǒng)對(duì)外提供服務(wù)。演練的系統(tǒng)范圍為核心系統(tǒng)、核心卡系統(tǒng)、柜面系統(tǒng)與指紋授權(quán)系統(tǒng)。演練中，XX 分行和 XX 分行部分終端通過分行至異地災(zāi)備中心 15M ATM 線路上聯(lián)異地災(zāi)備中心柜面系統(tǒng)虛擬 IP地址，登錄異地災(zāi)備中心柜面系統(tǒng)，完成核心系統(tǒng)基本存取款業(yè)務(wù)等功能驗(yàn)證。演練在 XX 異地災(zāi)備中心設(shè)立指揮中心，模擬演練災(zāi)難恢復(fù)預(yù)案中的災(zāi)難預(yù)警和災(zāi)難宣告的通知流程。本次演練擬實(shí)現(xiàn)如下目標(biāo)：1． 驗(yàn)證異地核心系統(tǒng)遷移后，異地核心群系統(tǒng)接管生產(chǎn)的可用性；2． 驗(yàn)證異地災(zāi)備中心 EMC TimeFinder/clone 和 IBM Flashcopy 可用性；23． 檢驗(yàn)恢復(fù)預(yù)案和切換回切手冊(cè)的有效性和可用性，并在演練過程中發(fā)現(xiàn)信息系統(tǒng)應(yīng)急管理體系存在的問題和不足，以便演練后進(jìn)行改進(jìn)和完善；4． 驗(yàn)證分行終端接入異地災(zāi)備中心網(wǎng)絡(luò)能力；5． 使參演人員熟悉應(yīng)急管理和災(zāi)難恢復(fù)的流程，提高參演人員的應(yīng)急處理能力和系統(tǒng)的風(fēng)險(xiǎn)防控能力。本次演練的計(jì)劃和實(shí)施將遵循以下原則：1． 不影響全行生產(chǎn)環(huán)境各系統(tǒng)的正常運(yùn)行；2． 不影響異地災(zāi)備中心數(shù)據(jù)復(fù)制的正常運(yùn)行；3． 不影響異地災(zāi)備中心接管生產(chǎn)系統(tǒng)能力；4． 不影響參演分行對(duì)外提供服務(wù)。、地點(diǎn)及參演人員1． 演練時(shí)間：2022 年 6 月 1 日，8:30－12:002． 演練地點(diǎn)：異地災(zāi)備中心、XX 分行、XX 分行3． 演練指揮：信息科技部負(fù)責(zé)人演練副指揮：xxx4． 參演部門：信息技術(shù)部應(yīng)急與災(zāi)備室、網(wǎng)絡(luò)管理室，科技開發(fā)中心開發(fā)三室、XX 分行、XX 分行5． 演練支持部門：科技開發(fā)中心技術(shù)與業(yè)務(wù)測(cè)試室、XX分行6． 演練組織：信息技術(shù)部應(yīng)急與災(zāi)備室37． 參演人員總行：信息技術(shù)部應(yīng)急與災(zāi)備室（） 、網(wǎng)絡(luò)管理室（） ，科技開發(fā)中心開發(fā)三室（） 。XX 分行：信息技術(shù)部負(fù)責(zé)人（） 、網(wǎng)絡(luò)技術(shù)人員 1 人（） 、分行營業(yè)部 2 人（） 、作業(yè)中心 1 人（） 。XX 分行：網(wǎng)絡(luò)技術(shù)人員 1 人（） 、分行營業(yè)部 2 人（） 、作業(yè)中心 1 人（） 。公司：電信集成、能通、EMC、IBM。8． 參演終端詳細(xì)信息　 IP 地址 所屬營業(yè)部 所屬營業(yè)部地址終端 1 XX 分行營業(yè)部 XX 市河西區(qū)賓水道 增 9 號(hào)終端 2 XX 分行營業(yè)部 XX 市河西區(qū)賓水道 增 9 號(hào)終端 3 XX 分行營業(yè)部 XX 市慶春路 73 號(hào)終端 4 XX 分行營業(yè)部 XX 市慶春路 73 號(hào)2 演練組織架構(gòu)和人員名單 演練組織架構(gòu)和職責(zé)為了加強(qiáng)本次演練組織管理，確保演練工作的順利進(jìn)行，按照總行應(yīng)急管理辦法及異地災(zāi)備中心災(zāi)難恢復(fù)預(yù)案成立以下工作組，負(fù)責(zé)制定演練計(jì)劃，組織實(shí)施演練工作，對(duì)演練結(jié)果進(jìn)行總結(jié)匯報(bào)。4應(yīng)急領(lǐng)導(dǎo)小組 應(yīng)急執(zhí)行小組 災(zāi)難恢復(fù)工作小組 系統(tǒng)恢復(fù)小組 網(wǎng)絡(luò)恢復(fù)小組 分行業(yè)務(wù)恢復(fù)小組 外部專家支持組 參與本次演練的各工作組角色與職能如下： 應(yīng)急領(lǐng)導(dǎo)小組應(yīng)急領(lǐng)導(dǎo)小組組長由信息技術(shù)部負(fù)責(zé)人擔(dān)任，主要職責(zé)是：1． 負(fù)責(zé)對(duì)異地災(zāi)備中心發(fā)起災(zāi)難預(yù)警和災(zāi)難宣告；2． 負(fù)責(zé)對(duì)演練過程中出現(xiàn)的異常情況進(jìn)行決策。工作地點(diǎn)：異地災(zāi)備中心（XX） 。 應(yīng)急執(zhí)行小組應(yīng)急執(zhí)行小組組長由信息技術(shù)部分管應(yīng)急工作的副總經(jīng)理擔(dān)任，下設(shè)災(zāi)難恢復(fù)工作小組、系統(tǒng)恢復(fù)小組、網(wǎng)絡(luò)恢復(fù)小組、分行業(yè)務(wù)恢復(fù)小組和外部專家組。由總行網(wǎng)絡(luò)管理室、開發(fā)三室、應(yīng)急與災(zāi)備室成員、異地災(zāi)備中心維護(hù)人員、分行信息科技部人員、分行業(yè)務(wù)人員和合作廠商人員組成。 災(zāi)難恢復(fù)工作小組由應(yīng)急與災(zāi)備室人員和合作廠商成員組成，主要職責(zé)是：1． 負(fù)責(zé)演練過程中的跟蹤和記錄；2． 負(fù)責(zé)協(xié)助演練實(shí)施完成演練工作，解決過程中問題；53． 演練過程發(fā)現(xiàn)并記錄問題，后續(xù)優(yōu)化災(zāi)備恢復(fù)流程與演練流程；4． 負(fù)責(zé)撰寫演練總結(jié)報(bào)告。工作地點(diǎn)：異地災(zāi)備中心（XX） 。 系統(tǒng)恢復(fù)執(zhí)行小組系統(tǒng)恢復(fù)小組由應(yīng)急與災(zāi)備室、開發(fā)三室、合作廠商人員組成，主要職責(zé)是：1． 負(fù)責(zé)異地災(zāi)備中心系統(tǒng)設(shè)備的檢查；2． 負(fù)責(zé)應(yīng)用系統(tǒng)的切換和回退工作；3． 負(fù)責(zé)演練過程中核心系統(tǒng)的啟動(dòng)和停止工作。工作地點(diǎn)：異地災(zāi)備中心（XX） 。 網(wǎng)絡(luò)恢復(fù)執(zhí)行小組網(wǎng)絡(luò)恢復(fù)小組由應(yīng)急與災(zāi)備室、網(wǎng)絡(luò)管理室、合作廠商人員組成，主要職責(zé)是：1． 負(fù)責(zé)異地災(zāi)備中心網(wǎng)絡(luò)設(shè)備的檢查；2． 負(fù)責(zé)異地災(zāi)備中心通信網(wǎng)絡(luò)的切換和回退工作。工作地點(diǎn)：異地災(zāi)備中心（XX） 。 分行業(yè)務(wù)恢復(fù)小組分行業(yè)務(wù)恢復(fù)小組由分行作業(yè)中心 1 人、分行營業(yè)部 2 人和信息科技部 1 人組成，主要職責(zé)是:1． 作業(yè)中心人員負(fù)責(zé)支持業(yè)務(wù)案例測(cè)試工作；2． 分行營業(yè)部人員負(fù)責(zé)在柜面終端上進(jìn)行測(cè)試案例的執(zhí)6行工作；3． 信息科技部人員負(fù)責(zé)調(diào)整及恢復(fù)分行柜面系統(tǒng)環(huán)境，協(xié)調(diào)并解決演練期間分行出現(xiàn)的技術(shù)問題。工作地點(diǎn)：XX 分行、XX 分行。 外部專家支持組外部專家組由中國電信、IBM、EMC、能通等公司派員組成，主要職責(zé)是負(fù)責(zé)為演練提供相關(guān)技術(shù)支持和服務(wù)。工作地點(diǎn)：異地災(zāi)備中心（XX） 。 演練組織成員及名單工作組 人員演練指揮 信息技術(shù)部負(fù)責(zé)人演練副指揮演練主持應(yīng)急領(lǐng)導(dǎo)組 組長：信息技術(shù)部負(fù)責(zé)人組長 組長： 災(zāi)難恢復(fù)工作小組應(yīng)急與災(zāi)備室人員： 合作廠商人員： 系統(tǒng)恢復(fù)小組應(yīng)急與災(zāi)備室人員： 開發(fā)三室人員：合作廠商成員： 應(yīng)急執(zhí)行組網(wǎng)絡(luò)恢復(fù)小組應(yīng)急與災(zāi)備室人員：網(wǎng)絡(luò)管理室人員：7合作廠商成員： 分行業(yè)務(wù)恢復(fù)小組XX 分行技術(shù)人員： XX 分行營業(yè)部人員： XX 分行作業(yè)中心人員：XX 分行技術(shù)人員：XX 分行營業(yè)部人員： XX 分行作業(yè)中心人員：外部專家支持組電信： IBM： EMC：能通：3 演練方案 演練內(nèi)容1． 在 XX 異地災(zāi)備中心設(shè)立指揮中心，模擬演練災(zāi)難恢復(fù)預(yù)案中的災(zāi)難預(yù)警和災(zāi)難宣告的通知流程。2． 災(zāi)難預(yù)警狀態(tài)下服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)等 IT 設(shè)備狀態(tài)檢查工作。3． 災(zāi)難宣告后啟動(dòng)異地災(zāi)備中心核心系統(tǒng)、核心卡系統(tǒng)、柜面系統(tǒng)和指紋授權(quán)系統(tǒng)。4． 參與測(cè)試分行確認(rèn)與災(zāi)備中心的通信正常。5． 分行技術(shù)人員確認(rèn)能從分行終端接入，分行柜員用自己的柜員賬號(hào)登入異地災(zāi)備中心柜面系統(tǒng)，在輸入賬號(hào)密碼后8可以正常登入并進(jìn)行數(shù)據(jù)測(cè)試和業(yè)務(wù)測(cè)試。6． 按照事先制訂好的業(yè)務(wù)驗(yàn)證案例完成業(yè)務(wù)測(cè)試。7． 業(yè)務(wù)驗(yàn)證測(cè)試完成后，進(jìn)行異地災(zāi)備中心各網(wǎng)絡(luò)系統(tǒng)和應(yīng)用系統(tǒng)恢復(fù)，異地災(zāi)備中心系統(tǒng)恢復(fù)正常運(yùn)行。 演練當(dāng)日總體安排6 月 1 日 工作事項(xiàng)8:158:30 異地災(zāi)備中心演練人員、生產(chǎn)中心演練人員、XX 分行、XX 分行演練人員到位8:458:50 應(yīng)急領(lǐng)導(dǎo)小組組長做出災(zāi)難預(yù)警決策8:509:15 應(yīng)急執(zhí)行小組執(zhí)行 IT 系統(tǒng)巡檢工作9:159:20 應(yīng)急領(lǐng)導(dǎo)小組組長進(jìn)行災(zāi)難宣告9:2010:45 應(yīng)急執(zhí)行小組執(zhí)行 IT 系統(tǒng)切換工作10:4510:50 通知應(yīng)急領(lǐng)導(dǎo)小組切換完成，通知 XX 分行、XX分行進(jìn)行系統(tǒng)功能驗(yàn)證10:5011:40 業(yè)務(wù)人員進(jìn)行系統(tǒng)功能驗(yàn)證及對(duì)外提供服務(wù)11:4012:00 匯報(bào)切換和測(cè)試結(jié)果、領(lǐng)導(dǎo)總結(jié)發(fā)言，演練結(jié)束9 演練流程部分分行接入模擬演練流程異地災(zāi)備中心值班人員應(yīng)急領(lǐng)導(dǎo)小組 應(yīng)急執(zhí)行小組 相關(guān)文檔災(zāi)難恢復(fù)階段預(yù)警階段災(zāi)難宣告階段開始預(yù)警決策確認(rèn)預(yù)警有效性通知恢復(fù)小組人員到位發(fā)出預(yù)警通知異地災(zāi)備中心資源準(zhǔn)備和環(huán)境檢查向應(yīng)急執(zhí)行小組報(bào)告預(yù)警工作完成接到報(bào)告 ， 異地災(zāi)備中心已進(jìn)入預(yù)警狀態(tài)災(zāi)難宣告決策確認(rèn)宣告有效性啟動(dòng)災(zāi)難恢復(fù)切換工作向應(yīng)急領(lǐng)導(dǎo)小組報(bào)告已進(jìn)入預(yù)警狀態(tài)報(bào)告應(yīng)急執(zhí)行小組切換完成接到報(bào)告 ， 宣布災(zāi)難恢復(fù)完成參演分行業(yè)務(wù)驗(yàn)證結(jié)束I T 基準(zhǔn)文檔演練工作記錄單業(yè)務(wù)測(cè)試工作記錄單發(fā)出災(zāi)難宣告通知報(bào)告應(yīng)急領(lǐng)導(dǎo)小組切換完成通知參演分行進(jìn)行業(yè)務(wù)驗(yàn)證災(zāi)難恢復(fù)預(yù)案及切換手冊(cè)演練工作記錄單業(yè)務(wù)驗(yàn)證完成10 演練步驟序號(hào) 任務(wù) 負(fù)責(zé)人 開始時(shí)間1 演練啟動(dòng) 參演人員到位 8:15 講述演練規(guī)則和內(nèi)容 演練主持 8:30 領(lǐng)導(dǎo)講話 8:35 宣布演練正式開始 8:432 災(zāi)難預(yù)警決策 應(yīng)急領(lǐng)導(dǎo) 小組 8:45 立即按預(yù)案進(jìn)行異地災(zāi)備環(huán)境的預(yù)警工作開展 應(yīng)急執(zhí)行 小組 8:45 由應(yīng)急執(zhí)行小組成員負(fù)責(zé)進(jìn)行人員召集的工作 應(yīng)急執(zhí)行小組成員 8:50預(yù)警狀態(tài)檢查網(wǎng)絡(luò)環(huán)境確認(rèn)系統(tǒng)及相關(guān)環(huán)境確認(rèn)DS8700 存儲(chǔ)狀態(tài)確認(rèn)VMAX 存儲(chǔ)狀態(tài)確認(rèn)MGM 數(shù)據(jù)復(fù)制狀態(tài)確認(rèn)SRDF 數(shù)據(jù)復(fù)制狀態(tài)確認(rèn)基礎(chǔ)設(shè)施狀態(tài)進(jìn)行確認(rèn)系統(tǒng)恢復(fù)執(zhí)行小組（系統(tǒng)運(yùn)維崗、數(shù)據(jù)備份運(yùn)維崗）網(wǎng)絡(luò)恢復(fù)執(zhí)行小組8:5011（網(wǎng)絡(luò)運(yùn)維崗）3 災(zāi)難宣告 9:15 災(zāi)難宣告決策 應(yīng)急領(lǐng)導(dǎo) 小組 9:15啟動(dòng)《XX 銀行異地災(zāi)難環(huán)境（核心系統(tǒng)）災(zāi)難恢復(fù)預(yù)案》 ，進(jìn)行 IT 系統(tǒng)切換應(yīng)急執(zhí)行小組 9:204 模擬 IT 切換 9:201． 在核心系統(tǒng)主機(jī)上刪除 DR 盤(1) 確認(rèn)核心系統(tǒng)主機(jī)上存儲(chǔ)盤無卷組信息(2) 在主機(jī)上刪除存儲(chǔ)盤2． 在核心卡系統(tǒng)主機(jī)上刪除 DR盤(1)確認(rèn)核心卡系統(tǒng)主機(jī)上存儲(chǔ)盤無卷組信息(2)在主機(jī)上刪除存儲(chǔ)盤3． 在指紋授權(quán)系統(tǒng)主機(jī)上刪除DR 盤(1)確認(rèn)指紋授權(quán)系統(tǒng)主機(jī)上存儲(chǔ)盤無卷組信息系統(tǒng)恢復(fù)執(zhí)行組9:2012(2)在主機(jī)上刪除存儲(chǔ)盤4． 在柜面系統(tǒng)主機(jī)上刪除 DR 盤5． 暫停 MGM 數(shù)據(jù)復(fù)制6． 生成 FlashCopy(1)生成核心卡系統(tǒng)的 FlashCopy(2)生成指紋授權(quán)系統(tǒng)的 FlashCopy(3)生成柜面系統(tǒng)的 FlashCopy7． 恢復(fù) MGM 數(shù)據(jù)復(fù)制8． 修改 DS8700 的存儲(chǔ)映射(1)連接到 DS8700 存儲(chǔ)(2)修改核心卡系統(tǒng)的存儲(chǔ)映射(3)修改指紋授權(quán)系統(tǒng)的存儲(chǔ)映射(4)修改柜面系統(tǒng)的存儲(chǔ)映射9． 生成核心系統(tǒng)的Timefinder/clone10． 修改核心系統(tǒng) VMAX 的存儲(chǔ)映射11． 在核心系統(tǒng)主機(jī)上識(shí)別Timefinder/clone 盤12． 在核心卡系統(tǒng)主機(jī)上識(shí)別FlashCopy 盤13． 在指紋授權(quán)系統(tǒng)主機(jī)上識(shí)別13FlashCopy 盤14． 在柜面系統(tǒng)主機(jī)上識(shí)別FlashCopy 盤15． 啟動(dòng)核心卡系統(tǒng)(1)核心卡系統(tǒng)服務(wù)器激活卷組(2)設(shè)置數(shù)據(jù)庫運(yùn)行環(huán)境(3)啟動(dòng)核心卡系統(tǒng)數(shù)據(jù)庫(4)啟動(dòng)核心卡系統(tǒng)應(yīng)用16． 啟動(dòng)核心系統(tǒng)(1)核心系統(tǒng)服務(wù)器激活卷組(2)設(shè)置數(shù)據(jù)庫運(yùn)行環(huán)境(3)啟動(dòng)核心系統(tǒng)數(shù)據(jù)庫(4)啟動(dòng)核心系統(tǒng)應(yīng)用17． 啟動(dòng)指紋授權(quán)系統(tǒng)應(yīng)用(1)指紋授權(quán)系統(tǒng)服務(wù)器激活卷組(2)啟動(dòng)指紋授權(quán)系統(tǒng)數(shù)據(jù)庫與應(yīng)用18． 啟動(dòng)柜面系統(tǒng)應(yīng)用(1)啟動(dòng) SQL Server 故障轉(zhuǎn)移群集(2)啟動(dòng)打印服務(wù)器和文件服務(wù)器(3)啟動(dòng)終端服務(wù)器和應(yīng)用服務(wù)器(4)配置打印服務(wù)端口(5)連接到打印機(jī)14 確認(rèn)各系統(tǒng)切換流程執(zhí)行完畢 災(zāi)備恢復(fù) 工作組 10:45 通知指揮小組切換完成 災(zāi)備恢復(fù) 工作組 10:45業(yè)務(wù)驗(yàn)證1． 業(yè)務(wù)功能驗(yàn)證2． 數(shù)據(jù)追補(bǔ)3． 分行柜員交易測(cè)試災(zāi)難恢復(fù)驗(yàn)證組（參演分行人員）災(zāi)難恢復(fù)執(zhí)行組（系統(tǒng)運(yùn)維崗、數(shù)據(jù)備份運(yùn)維崗）10:505 演練總結(jié) 11:40 切換和測(cè)試結(jié)果匯報(bào) 演練主持 11:40 領(lǐng)導(dǎo)講話 11:456 系統(tǒng)回退 14:001． 停止柜面系統(tǒng)應(yīng)用(1)停止應(yīng)用服務(wù)器和終端服務(wù)器(2)停止打印服務(wù)器和文件服務(wù)器應(yīng)急執(zhí)行組（系統(tǒng)運(yùn)維崗、14:0015(3)停止 SQL Server 故障轉(zhuǎn)移群集2． 停止指紋授權(quán)系統(tǒng)應(yīng)用(1)清空指紋授權(quán)數(shù)據(jù)庫數(shù)據(jù)(2)恢復(fù)指紋授權(quán)數(shù)據(jù)庫數(shù)據(jù)(3)停止指紋授權(quán)應(yīng)用與數(shù)據(jù)庫(4)卸載文件系統(tǒng)、關(guān)閉卷組3． 停止核心系統(tǒng)(1)停止應(yīng)用(2)停止數(shù)據(jù)庫(3)卸載文件系統(tǒng)、關(guān)閉卷組并導(dǎo)出4． 停止核心卡系統(tǒng)應(yīng)用系統(tǒng)(1) 停止應(yīng)用(2) 停止數(shù)據(jù)庫(3) 卸載文件系統(tǒng)、關(guān)閉卷組并導(dǎo)出5． 在核心系統(tǒng)主機(jī)上刪除Timefinder/clone 盤6． 在核心卡系統(tǒng)主機(jī)上刪除FlashCopy 盤7． 在指紋授權(quán)系統(tǒng)主機(jī)上刪除FlashCopy 盤8． 修改核心系統(tǒng) VMAX 的存儲(chǔ)映射數(shù)據(jù)備份運(yùn)維崗）169． 修改 DS8700 的存儲(chǔ)映射(1) 連接到 DS8700 存儲(chǔ)(2) 修改核心卡系統(tǒng)的存儲(chǔ)映射(3) 修改指紋授權(quán)系統(tǒng)的存儲(chǔ)映射(4) 修改柜面系統(tǒng)的存儲(chǔ)映射10． 在核心系統(tǒng)主機(jī)上識(shí)別 DR 卷11． 在核心卡系統(tǒng)主機(jī)上識(shí)別 DR卷