【導讀】網(wǎng)絡維護人員分析網(wǎng)絡異常。但是Netscout原有系統(tǒng)中的告警功能，不能設置自。定義基線，告警條目不足，在很大程度上限制了告警功能的使用。數(shù)據(jù)查看，更希望獲得每天每周每月甚至每年的經(jīng)過分析后的運行報告。因此，需要在現(xiàn)有的流量分析系統(tǒng)中進行二次開發(fā)，以便提供強有力的數(shù)據(jù)。而在原有系統(tǒng)的告警和基線功能上給出了新的解決方案并解決客戶實際問題。流量分析管理統(tǒng)一平臺。加穩(wěn)定的為人民服務提供了助力。需匯總和查詢的資料庫和知識庫，提高了銀行的工作效率。

　　

【正文】 31： 新系統(tǒng)和原系統(tǒng)的網(wǎng)絡部署原型圖 新系統(tǒng)的三個主要功能模塊中的報表模塊和主動告警功能與原有的 PM 系統(tǒng)關系緊密，故障排除應用流程處理模塊與原有 PM 系統(tǒng)沒有任何關系，屬于全新功能。下圖更詳細的描述了新系統(tǒng)的三個子系統(tǒng)與原有 PM 系統(tǒng)之間的關系。 圖 32： 新系統(tǒng)和原系統(tǒng)的數(shù)據(jù)關系圖 系統(tǒng)涉及術語和縮略語 在本系統(tǒng)的后續(xù)功能說明中會涉及到一些專業(yè)術語，下表給出相關重要的專 19 業(yè)術語的縮略語和解釋。 表 32：系統(tǒng)涉及專業(yè)術語及縮略語 術語、縮略語 解 釋 CCB 中國建設銀行 探針 NetScout 系統(tǒng)采集數(shù)據(jù)的設備，一般架設在網(wǎng)絡通信節(jié)點上，用來統(tǒng)計網(wǎng)絡傳輸數(shù)據(jù)，比如每分鐘傳輸量，每秒數(shù)據(jù)傳輸率，帶寬使用率，網(wǎng)絡數(shù)據(jù)包重傳個數(shù)等。 本系統(tǒng)需要處理的數(shù)據(jù)都是來自于探針的統(tǒng)計數(shù)據(jù) 骨干網(wǎng)鏈路 中國建行數(shù)據(jù)中心對外網(wǎng)絡接口，都是光纖鏈路，每條光纖鏈路帶寬一般為 628M 左右，該鏈路將會根據(jù)映射端口，被劃分為多個 PVC 通道，從而連接各省分行進行通信 骨干網(wǎng)鏈路都是成對出現(xiàn)，分為主副兩條線路，主線路為電信，標記為 RA，副線路為聯(lián)通，標記為 RB。實時業(yè)務系統(tǒng)一般主線路， OA 辦公一般在副線 路。當主線路出現(xiàn)問題的時候可能會臨時切換到副線路上。 PVC 鏈路 從骨干網(wǎng)鏈路中通過端口映射劃分出來的光纖通信鏈路，一個 PVC 連接一家分行 PVC 鏈路都是成對出現(xiàn)，分為主副兩條線路，主線路為電信，標記為 RA，副線路為聯(lián)通，標記為 RB。 主鏈路 骨干網(wǎng)和 PVC 鏈路都劃分為：主鏈路和副鏈路。 主鏈路主要用來負責傳輸一些重要的，實時性要求比較高的應用系統(tǒng)數(shù)據(jù) 副鏈路 副鏈路主要用來負責一些相對次要的，實時性要求不高，但有可能數(shù)據(jù)量大的系統(tǒng) 應用系統(tǒng) 應用系統(tǒng)是建行內(nèi)部開發(fā)和運行的用于完成某種應用的軟件，軟 件在部署上可能是分布式的，有多臺電腦運行，中間有很多網(wǎng)絡節(jié)點 應用 應用就是應用系統(tǒng)中的一個邏輯部分，是應用系統(tǒng)中不同的子系統(tǒng)連接點。在物理部署上，可能一個應用或幾個應用之間安裝一個探針，也可能一個應用上安裝多個探針。但是本系統(tǒng)所處理的數(shù)據(jù)源都是按照一個應用一個監(jiān)測數(shù)據(jù)的關系提供，因此在本系統(tǒng)中可以將探針和應用等同看待。所謂的一個應用就是一份探針數(shù)據(jù)。 上述部分術語可以結合下圖理解： 20 圖 33： NetScout 探針部署和名詞示意圖 系統(tǒng)角色和權限 在本系統(tǒng)的使用者中包括了銀行高層、決策層、系 統(tǒng)維護人員等。在初步設計中， 系統(tǒng)權限基本分為以下三種： ? 系統(tǒng)管理員 具有骨干網(wǎng)管理員、內(nèi)部系統(tǒng)管理員的所有權限，同時能夠管理賬號，查看系統(tǒng)運行狀態(tài)統(tǒng)計 。 ? 骨干網(wǎng)管理員 查看骨干網(wǎng)日報、周報、月報，能對三種報告中的報警進行批復 。 ? 內(nèi)部系統(tǒng)管理員 查看重要系統(tǒng)日報、周報、月報，能對三種報告中的報警進行批復 。 注： 系統(tǒng)管理員可以添加和管理骨干網(wǎng)管理員和內(nèi)部系統(tǒng)管理員賬號。 系統(tǒng) 功能性需求 按照系統(tǒng)功能和企業(yè)工作流程，我們將整個輔助分析系統(tǒng)分為 兩 個子系統(tǒng)： 21 報告生成子系統(tǒng)和管理工作人員工作平臺子系統(tǒng)。 報告生成 子 系統(tǒng)功能 報告生成子系統(tǒng)的主要功能就是接受從 Netscout 系統(tǒng)中監(jiān)測到的數(shù)據(jù)，并將數(shù)據(jù)進行持久化保存（保存期限最少為 1 年），在完成數(shù)據(jù)持久化保存后，本子系統(tǒng)需要自動計算并更新報警基線數(shù)據(jù)并進行基線的持久化保存。 由于報告分為日報、周報、月報，需要敘述內(nèi)容較多，本文僅以日報為例解釋系統(tǒng)基本需求和計算方式。 (一) 系統(tǒng)設定 ? 數(shù)據(jù)源說明 報告系統(tǒng)的數(shù)據(jù)來源全是 PM導出的數(shù)據(jù)。數(shù)據(jù)格式為 *.CSV 格式 。 CSV 數(shù)據(jù)表格分為兩大類： ? 線路數(shù)據(jù) 根據(jù)系統(tǒng)功能，與線路數(shù)據(jù)相關的數(shù)據(jù)源分為如下幾類： 表 33：數(shù)據(jù) 源格式說明 鏈路分類 數(shù)據(jù)種類 CSV 數(shù)據(jù)文件命名規(guī)則 骨干網(wǎng) 流量鏈路數(shù)據(jù) [骨干網(wǎng)簡寫 ]_Link_[RA/RB] 應用系統(tǒng)流量數(shù)據(jù) [骨干網(wǎng)簡寫 ]_System_ [RA/RB] PVC 流量鏈路數(shù)據(jù) [骨干網(wǎng)簡寫 ]_[PVC 簡寫 ]_Link_[RA/RB] 應用系統(tǒng)流量數(shù)據(jù) [骨干網(wǎng)簡寫 ]_[PVC 簡寫 ]_System_[RA/RB] 應用系統(tǒng) 應用 [系統(tǒng)簡寫 ]_[應用簡寫 ]FlightTime [系統(tǒng)簡寫 ]_[應用簡寫 ]KPI [系統(tǒng)簡寫 ]_[應用簡寫 ]Retransmission [系統(tǒng)簡寫 ]_[應用簡寫 ]Traffic 由于 PVC和各省分行對應，最終報告中需要顯示具體分行的名稱，而且 CSV 22 數(shù)據(jù)文件名稱需要反應地區(qū)，因此本系統(tǒng)須包括全國建行分行（省或直轄市分行）的名稱和簡稱的管理。比如，浙江分行，在 CSV 數(shù)據(jù)表的名字上對應 ZJ。 ? 應用系統(tǒng)應用數(shù)據(jù) 建行內(nèi)部擁有多套應用系統(tǒng)，應用系統(tǒng)數(shù)量暫時不明。為了實時監(jiān)控每一個系統(tǒng)的運行狀態(tài)，在一些關鍵的應用之間，也就是應用間網(wǎng)絡鏈路上都安裝了數(shù)據(jù)探針。數(shù)據(jù)探針將會負責監(jiān)控該條網(wǎng)絡流量情況。因此，對于 NetScout 來說，一個應用系統(tǒng)的網(wǎng)絡故障定位是根據(jù)探針探測到的每個應用狀態(tài)來判定的。 代表應用狀態(tài)的數(shù)據(jù)分為四個 CSV 表，分別為： 表 34：應用系統(tǒng)數(shù)據(jù)表數(shù)據(jù)源格式規(guī)定 數(shù)據(jù)種類 CSV數(shù)據(jù)文件命名規(guī)則 FlightTime [應用 系統(tǒng)名 ]_[應用名 ]_FlightTime Traffic [應用 系統(tǒng)名 ]_[應用名 ]_Traffic Retransmission [應用 系統(tǒng)名 ]_[應用名 ]_Retransmission KPI [應用 系統(tǒng)名 ]_[應用名 ]_KPI ? 報告導出設定 系統(tǒng)的報告暫時分為：日報，周報 ，月報三種。管理員可以選擇日報周六周日是否導出。 ? 數(shù)據(jù)基線說明 本系統(tǒng)的主要功能就是對當日的數(shù)據(jù)跟歷史基線數(shù)據(jù)做對比，從而評估當日網(wǎng)絡情況。 表 35： 數(shù)據(jù)基線 種類 編號 基線類型 僅工作時間 僅工作日 說明 BLD1 日基線 是 是 BLD2 日基線 否 是 BLD3 日基線 是 否 BLD4 日基線 否 否 BLW1 周基線 是 是 BLW2 周基線 否 是 BLW3 周基線 是 否 23 BLW4 周基線 否 否 默認情況下，基線類型為： BLD1 ? 基線的計算方式 報表的統(tǒng)計 主要是通過實際數(shù)據(jù)跟歷史數(shù)據(jù)基線的對比，顯示當前數(shù)據(jù)的正常性。 動態(tài)基線數(shù)據(jù)自動計算，當在連續(xù)的一段時間中實際結果超過基線的異常閥值（上限 /下線閥值）多少次就算是一個異常出現(xiàn)，記錄該異常，記錄的信息最少包括： 閥值（上 /下） + 時間段 + 次數(shù) ? 歷史基線數(shù)據(jù)算法： 假設： X 為系統(tǒng)保存的某種基線類型下的某個基線數(shù)據(jù)， Y 為當日該數(shù)據(jù)的實際值。按照下面的公式計算更新后的基線數(shù)據(jù)： ? 基線使用策略 為了使基線貼近最近時間，更真實的反應網(wǎng)絡的正常情況，對基線的使用作如下要求： 1. 每種類型的基線，系統(tǒng)保留 2條： 基線 A 和 基線 B 2. 暫以 30 天 (或按照自然月 )為變換周期 ， 30天后切換基線進行數(shù)據(jù)對比 表 36：基線 替換方式 說明 月份 基線 A 基線 B 當前基線 切換基線時操作 1 計算 1月份數(shù)據(jù) 計算 1月份數(shù)據(jù) 基線 A 2 計算 2月份數(shù)據(jù) 不進行更新計算 基線 B 清除基線 A數(shù)據(jù) 3 不進行更新計算 計算 3月份數(shù)據(jù) 基線 A 清除基線 B數(shù)據(jù) 4 計算 4月份數(shù)據(jù) 不進行更新計算 基線 B 清除基線 A數(shù)據(jù) 5 不進行更新計算 計算 5月份數(shù)據(jù) 基線 A 清除基線 B數(shù)據(jù) 6 計算 6月份數(shù)據(jù) 不進行更新計算 基線 B 清除基線 A數(shù)據(jù) 24 ? ? ? ? 清除基線 B數(shù)據(jù) ? 數(shù)據(jù)異常點判定 異常數(shù)據(jù)的判定是根據(jù)閥值來決定的。每條基線上都會設定一個異常數(shù)據(jù)判定閥值。 閥值分為：上限閥值、下限閥值。上限閥值和下限閥值可以單獨設定。 閥值按照百分比進行設定。例如，對于某條基線 X，設定上限閥值為 70%，下線閥值為 60%。在時刻 1點 12分的時候，計算的歷史基線值為： 890，當實際值為低于 890 x (10060)%，或者高于 890*（ 100+70） %的時候，判定為異常數(shù)據(jù)點。 ? 數(shù)據(jù)報警 當異常數(shù)據(jù)點連續(xù)出現(xiàn) N 次以上，本系統(tǒng)將會產(chǎn) 生并記錄一條提示報警信息。管理員可以針對某條鏈路或者應用來設定【最多連續(xù)次數(shù)】。 系統(tǒng)記錄的報警信息包括如下信息： ? 報警的鏈路或應用 ? 連續(xù)異常數(shù)據(jù)點出現(xiàn)的起始位置 ? 連續(xù)異常數(shù)據(jù)點出現(xiàn)的結束位置 ? 連續(xù)出現(xiàn)次數(shù) ? 管理員是否查看 ? 是否的確有問題 ? 備注（如果真的有問題，管理員在備注中說明問題） 重要：管理員需要對每條報警進行人工批復，來說明此報警是否真的是由于故障導致。用于后期的報警準確率統(tǒng)計和管理員工作統(tǒng)計。 ? 鏈路或應用健康狀態(tài)判定 本系統(tǒng)將會根據(jù)鏈路或應用每日的報警次數(shù)來評判系統(tǒng)或鏈路的健康等級。系統(tǒng)或骨干網(wǎng)鏈 路的狀態(tài)情況，從所屬的應用或 PVC鏈路中選取最高狀態(tài)等級作為本身的狀態(tài)等級。 管理員可以針對某條鏈路或者應用來設定不同等級的【最多報警次數(shù)】。鏈路或系統(tǒng)應用健康狀態(tài)分為多個等級（等級數(shù)量可能變化）： ? 綠 25 ? 黃 ? 橙 ? 紅 例如，管理員將 CICS 系統(tǒng)的 APtoDB 應用的不同等級設定為：綠 1 黃 3 橙 4 紅 5。 當天 APtoDB 應用的報警次數(shù)為 4次，則該應用等級為 橙 。 假設 CICS 系統(tǒng)包含四個應用： APtoDB， Web， WebToAP， WLQZ，當日告警分別為： 0,1,3,2。則 CICS 系統(tǒng)的健康狀態(tài)為 黃 。 ? 關于報警 對于從數(shù)據(jù)源中判定出來的報警，暫定使用郵件通知給管理員，本系統(tǒng)提供設置郵件賬號界面。 當系統(tǒng)產(chǎn)生報警的時候可以使用本功能中設定的郵件賬號自動給管理員發(fā)送報警郵件。 (二 ) 日報 生成 本輔助系統(tǒng)需要每日在接收到數(shù)據(jù)并進行分析之后，自動生成四種類型的日報： 骨干網(wǎng)流量統(tǒng)計分析日報、分行 PVC 網(wǎng)流量統(tǒng)計分析日報、總行內(nèi)部應用系統(tǒng)日報、重要系統(tǒng)日報。 ? 骨干網(wǎng)流量統(tǒng)計分析日報 《骨干網(wǎng)流量統(tǒng)計分析日報》主要用來統(tǒng)計每日建行骨干網(wǎng)網(wǎng)絡運行情況。在頁眉中需要顯示如下信息： 圖 34：骨干網(wǎng)流量統(tǒng)計分析日報頁眉格 式 《骨干網(wǎng)流量統(tǒng)計分析日報》 需要展示的內(nèi)容總共分為 五 部分： 總行骨干網(wǎng)鏈路流量統(tǒng)計 本部分主要包含一個表格，用于反應每條骨干網(wǎng)主要線路的每日帶寬利用率和數(shù)據(jù)傳輸總量。系統(tǒng)管理員可以在看到當天數(shù)據(jù)后，對本部分添加解釋性備注批示。 表 37：總行骨干網(wǎng)鏈路流量統(tǒng)計 數(shù)據(jù)項 編號 表格數(shù)據(jù)項 數(shù)據(jù)來源 計算方式 26 名稱 312111 鏈路名稱 由系統(tǒng)管理員添加的骨干網(wǎng)線路信息中提取 【線路名稱】 無 312112 總帶寬 由系統(tǒng)管理員添加的骨干網(wǎng)線路信息中提取 【線路帶寬】 無 312113 日帶寬平均利用 率統(tǒng)計區(qū)間 此工作區(qū)間由管理員在本系統(tǒng)內(nèi)設定。比如，工作時間為：早 8 點至下午 17點 。 設定了工作區(qū)間將會影響當日： 帶寬日均利用率（出 /入） 的計算，即只計算工作區(qū)間內(nèi)的加權平均值，作為當日的帶寬平均利用率 312114 入 利用率 表：骨干網(wǎng) 流量 數(shù)據(jù)格式 入 利用率 (%) [平均 ] 根據(jù)工作區(qū)間設定計算加權平均值 312115 入 利用率 基線 當日基線值 根據(jù)基線的計算方式 更新當日基線 312116 出 利用率 表：骨干網(wǎng) 流量 數(shù)據(jù)格式 出 利用率 (%) [平均 ] 根據(jù)工作區(qū)間設定計算加權平均值 312117 出 利用率 基線 當日基線值 312118 傳輸總量 表：骨干網(wǎng) 流量 數(shù)據(jù)格式 總量 利用率 (%) [平均 ] 計算全天數(shù)據(jù)傳輸總量 312119 傳輸總量 基線 當日基線值 根據(jù)基線的計算方式 更新當日基線 特殊說明： 如果 實際數(shù)據(jù) 為異常點，則標注為 黃色底色，紅色加粗字體。 27 骨干網(wǎng)鏈路帶寬利用率曲線圖 系統(tǒng)管理員可以在看到當天數(shù)據(jù)后，對本部分添加解釋性備注批示。每條骨干網(wǎng)鏈路流量 使用 日曲線顯示 。 表 38：骨干網(wǎng)鏈路 利用率曲線圖數(shù)據(jù)項 編號 表格數(shù)據(jù)項名 稱 數(shù)據(jù)來源 計算方式 312121 線路狀態(tài) 由系統(tǒng)管理員添加的骨干網(wǎng)線路信息中提取 【線路名稱】 健康狀態(tài) 入 帶寬利用率報警次數(shù) 出 帶寬利用率報警次數(shù)