建設(shè)devops統(tǒng)一運(yùn)維監(jiān)控平臺-展示頁
2025-07-04 22:46本頁面
【正文】 觸發(fā)或告警。技術(shù)包括Map/Reduce計(jì)算、全日志檢索、流式計(jì)算、指標(biāo)計(jì)算等，重點(diǎn)是根據(jù)不同的場景需求選擇不同的計(jì)算方式。 從采集方式來說通?？梢苑譃榻涌诓杉?、客戶端agent采集、通過網(wǎng)絡(luò)協(xié)議主動抓取（、snmp等） 數(shù)據(jù)存儲： 采集到的數(shù)據(jù)一般都會存儲到文件系統(tǒng)（如HDFS）、索引系統(tǒng)（如elasticsearch）、指標(biāo)庫（如influxdb）、消息隊(duì)列（如kafka，做消息臨時存儲或者緩沖）、數(shù)據(jù)庫（如mysql） 數(shù)據(jù)分析： 針對采集到的數(shù)據(jù)，進(jìn)行數(shù)據(jù)的處理。數(shù)據(jù)采集從指標(biāo)上劃分可以分為業(yè)務(wù)指標(biāo)、應(yīng)用指標(biāo)、系統(tǒng)軟件監(jiān)控指標(biāo)、系統(tǒng)指標(biāo)。業(yè)務(wù)應(yīng)用層主要包括應(yīng)用軟件、企業(yè)消息總線等，中間件層包括數(shù)據(jù)庫、緩存、配置中心、等各種系統(tǒng)軟件，基礎(chǔ)設(shè)施層主要有物理機(jī)、虛擬機(jī)、容器、網(wǎng)絡(luò)設(shè)備、存儲設(shè)備等等。目錄： 一、統(tǒng)一監(jiān)控平臺架構(gòu)解析 二、系統(tǒng)監(jiān)控的技術(shù)棧 三、開源系統(tǒng)監(jiān)控軟件 Zabbix VS Nagios VS OpenFalcon 四、基于k8s容器云背景下的系統(tǒng)監(jiān)控實(shí)踐：cAdvisor+Heapster+Influxdb 五、容器時代的監(jiān)控利器： Prometheus 一、統(tǒng)一監(jiān)控平臺架構(gòu)解析 先做一下回顧，統(tǒng)一監(jiān)控平臺由七大角色構(gòu)成：監(jiān)控源、數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)分析、數(shù)據(jù)展現(xiàn)、預(yù)警中心、CMDB(企業(yè)軟硬件資產(chǎn)管理)。 范文范例參考建設(shè)DevOps統(tǒng)一運(yùn)維監(jiān)控平臺全面的系統(tǒng)監(jiān)控 日期：20170314 17:20 瀏覽：100 評論：0 前言 隨著Devops、云計(jì)算、微服務(wù)、容器等理念的逐步落地和大力發(fā)展，機(jī)器越來越多，應(yīng)用越來越多，服務(wù)越來越微，應(yīng)用運(yùn)行基礎(chǔ)環(huán)境越來多樣化，容器、虛擬機(jī)、物理機(jī)不一而足。面對動輒幾百上千個虛擬機(jī)、容器，數(shù)十種要監(jiān)控的對象，現(xiàn)有的監(jiān)控系統(tǒng)還能否支撐的?。縼碜杂谌萜?、虛擬機(jī)、物理機(jī)、網(wǎng)絡(luò)設(shè)備、中間件的指標(biāo)數(shù)據(jù)如何采用同一套方案快速、完整的收集和分析告警？怎樣的架構(gòu)、技術(shù)方案才更適合如此龐大繁雜的監(jiān)控需求呢？ 監(jiān)控源： 從層次上來分，大致可以分為三層，業(yè)務(wù)應(yīng)用層、中間件層、基礎(chǔ)設(shè)施層。 數(shù)據(jù)采集： 數(shù)據(jù)源如此多樣，數(shù)據(jù)采集的任務(wù)自然輕松不了。應(yīng)用監(jiān)控指標(biāo)如：可用性、異常、吞吐量、響應(yīng)時間、當(dāng)前等待筆數(shù)、資源占用率、請求量、日志大小、性能、隊(duì)列深度、線程數(shù)、服務(wù)調(diào)用次數(shù)、訪問量、服務(wù)可用性等，業(yè)務(wù)監(jiān)控指標(biāo)如大額流水、流水區(qū)域、流水明細(xì)、請求筆數(shù)、響應(yīng)時間、響應(yīng)筆數(shù)等，系統(tǒng)監(jiān)控指標(biāo)如：CPU負(fù)載、內(nèi)存負(fù)載、磁盤負(fù)載、網(wǎng)絡(luò)IO、磁盤IO、tcp連接數(shù)、進(jìn)程數(shù)等。處理分兩類：實(shí)時處理和批處理。 數(shù)據(jù)展現(xiàn)： 將處理的結(jié)果進(jìn)行圖表展現(xiàn)，在多屏?xí)r代，跨設(shè)備的支持必不可少。 CMDB(企業(yè)軟硬件資產(chǎn)管理): CMDB在統(tǒng)一監(jiān)控平臺中是很重要的一環(huán)，監(jiān)控源雖然種類繁多，但是他們大都有著關(guān)系，如應(yīng)用運(yùn)行在運(yùn)行環(huán)境中，應(yīng)用的正常運(yùn)行又依賴網(wǎng)絡(luò)和存儲設(shè)備，一個應(yīng)用也會依賴于其他的應(yīng)用（業(yè)務(wù)依賴），一旦其中任何一個環(huán)節(jié)出了問題，都會導(dǎo)致應(yīng)用的不可用。 OK，回顧到此為止，進(jìn)入正題，系統(tǒng)監(jiān)控。 系統(tǒng)監(jiān)控不同于日志監(jiān)控，有很多開源軟件把數(shù)據(jù)庫采集、數(shù)據(jù)存儲、數(shù)據(jù)展現(xiàn)、事件告警的任務(wù)都完成了，所以對于系統(tǒng)監(jiān)控的技術(shù)棧中，將這些開源軟件暫且排除，待后面章節(jié)再進(jìn)行講解。 數(shù)據(jù)采集： 系統(tǒng)監(jiān)控?cái)?shù)據(jù)采集一般分為兩種方式：主動采集、客戶端采集。 數(shù)據(jù)緩沖： 和日志監(jiān)控一樣，在面臨海量監(jiān)控時，考慮到網(wǎng)絡(luò)的壓力和數(shù)據(jù)處理的瓶頸，可以在數(shù)據(jù)存儲前先經(jīng)過一層數(shù)據(jù)緩沖，將采集到的數(shù)據(jù)先放
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1