商業(yè)平臺業(yè)務運維實踐培訓資料-文庫吧資料
2024-10-25 11:28本頁面
【正文】 可依賴。 利用數據任務調度管理系統(tǒng)， 對數據任務進行統(tǒng)一管理,優(yōu)化報警內容,該報警對應的運維專員聯系方式 該報警對應的開發(fā)人員聯系方式,減少對運 維人員經 驗的依賴， 使得新人 和值班人 員都可以 快速處理,靈活配置報警內容,降低維護成本， 提升工作效率,繁雜數據故障處理,存在的問題： ? 不能快速識別哪些任務失敗了，影響了誰 ? 一個任務失敗會導致多個任務失敗，每個任務的任務都會發(fā)一個報警 ? 處理多個任務失敗時，需要人工確認修復順序，還要等待每個任務執(zhí) 行完成后再人工執(zhí)行下一個 ? 如果所需數據源存在短暫延遲到位，會導致任務執(zhí)行失敗并報警，有 時會對運維人員產生干擾,A,B,C,D,E,F,G,H,I,J,K,L,M,…,繁雜數據故障處理,數據任務調度管理系統(tǒng)： ? 實時自動的可視化數據任務關系圖 ? 能快速識別哪些執(zhí)行失敗及影響范圍 ? 父節(jié)點任務失敗后報警，子任務節(jié)點不再執(zhí)行（也不會報警） ? 恢復關鍵路徑節(jié)點任務時，只需選擇帶依賴執(zhí)行，后續(xù)子節(jié)點任務會 自動執(zhí)行，無需人工干預，等待 ? 支持每個任務自定義重試次數和間隔，如果任務所需數據源存在延遲 提供現象，不會馬上報警，直到達到最大重試次數為止，降低對運維 人員的干擾,A,B,C,D,E,F,G,H,I,J,M,L,K,…,…,繁雜數據故障處理,Agenda 如何提升故障處理速度 如何提升故障發(fā)現率 如何降低故障率,1 2 3,? ? ? ? ? ? ? ?,網絡連通性 機器存活 遠程可達 丟包檢測 容量監(jiān)控 磁盤故障 磁盤壞道 內存條檢測,基礎資源類,完善監(jiān)控指標 常規(guī)業(yè)務類,自定義業(yè)務類,? ? ? ?,端口 進程 Curl 工作日志,? ? ? ? ? ? ? ?,任務始止類 關鍵組件監(jiān)控 一致性類 跨界類監(jiān)控 數據流監(jiān)控 超時/延時類 失敗率/成功率 ……,自定義業(yè)務類監(jiān)控,……,……,監(jiān) 控 項,低位警界線,業(yè)務系統(tǒng)健康度趨勢 高位警界線 監(jiān) 控 項 加強關注！ 加強關注！,導致,全面 短信報警過多,產生,麻木心理,降噪 ?監(jiān)控的系統(tǒng)：300+ ?監(jiān)控的實例：20000+ ?運維人員短信接收：人均每天6條 ?報警策略 ?報警分層 ?精準下發(fā),取得的效果 采用的手段,報警分層,網段可用 機器存活 遠程可達 業(yè)務類,A,B,C,D,E,F,G,H,I,J,M,L,K,…,…,數據依賴任務,報警精準下發(fā),運維值班1 運維值班2
環(huán)評公示相關推薦
鄂ICP備17016276號-1