【正文】 、可伸縮的時間序列數(shù)據(jù)庫，可以從大規(guī)模的集群（包括集群中的網(wǎng)絡(luò)設(shè)備、操作系統(tǒng)、應(yīng)用程序）中獲取相應(yīng)的metrics并進行存儲、索引以及服務(wù)，從而使得這些數(shù)據(jù)更容易讓人理解，如web化，圖形化等。此處主要關(guān)注于如何自建一個統(tǒng)一系統(tǒng)監(jiān)控平臺。技術(shù)包括Map/Reduce計算、全日志檢索、流式計算、指標計算等，重點是根據(jù)不同的場景需求選擇不同的計算方式。目錄： 一、統(tǒng)一監(jiān)控平臺架構(gòu)解析 二、系統(tǒng)監(jiān)控的技術(shù)棧 三、開源系統(tǒng)監(jiān)控軟件 Zabbix VS Nagios VS OpenFalcon 四、基于k8s容器云背景下的系統(tǒng)監(jiān)控實踐：cAdvisor+Heapster+Influxdb 五、容器時代的監(jiān)控利器： Prometheus 一、統(tǒng)一監(jiān)控平臺架構(gòu)解析 先做一下回顧，統(tǒng)一監(jiān)控平臺由七大角色構(gòu)成：監(jiān)控源、數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)分析、數(shù)據(jù)展現(xiàn)、預(yù)警中心、CMDB(企業(yè)軟硬件資產(chǎn)管理)。 數(shù)據(jù)采集： 數(shù)據(jù)源如此多樣，數(shù)據(jù)采集的任務(wù)自然輕松不了。 CMDB(企業(yè)軟硬件資產(chǎn)管理): CMDB在統(tǒng)一監(jiān)控平臺中是很重要的一環(huán)，監(jiān)控源雖然種類繁多，但是他們大都有著關(guān)系，如應(yīng)用運行在運行環(huán)境中，應(yīng)用的正常運行又依賴網(wǎng)絡(luò)和存儲設(shè)備，一個應(yīng)用也會依賴于其他的應(yīng)用（業(yè)務(wù)依賴），一旦其中任何一個環(huán)節(jié)出了問題，都會導(dǎo)致應(yīng)用的不可用。 數(shù)據(jù)緩沖： 和日志監(jiān)控一樣，在面臨海量監(jiān)控時，考慮到網(wǎng)絡(luò)的壓力和數(shù)據(jù)處理的瓶頸，可以在數(shù)據(jù)存儲前先經(jīng)過一層數(shù)據(jù)緩沖，將采集到的數(shù)據(jù)先放置到消息隊列中，然后再從分布式隊列中讀取數(shù)據(jù)并存儲。提供類sql的查詢語法，安裝方便，單點即可使用，雖然有集群的能力，不過該特性是非開源的（不過單點性能基本也都能滿足企業(yè)需求了）。 當(dāng)然，Grafana的數(shù)據(jù)源都是來自時序數(shù)據(jù)庫，在實際場景中，可能你想要查看的報表的一部分數(shù)據(jù)還來自于業(yè)務(wù)系統(tǒng)，這就是Grafana或者其他的監(jiān)控軟件做不到的了，去擴展是一種方式，另外一種方式就是結(jié)合自己的需求實現(xiàn)圖表展現(xiàn),通過對時序數(shù)據(jù)的計算分析以及結(jié)合業(yè)務(wù)數(shù)據(jù)，使用如echarts等開源圖表前端框架進行展現(xiàn)。 三、開源系統(tǒng)監(jiān)控軟件它是一款免費的開源 IT 基礎(chǔ)設(shè)施監(jiān)控系統(tǒng)，其功能強大，靈活性強，能有效監(jiān)控 Windows 、Linux、VMware 和 Unix 主機狀態(tài)，交換機、路由器等網(wǎng)絡(luò)設(shè)置等。架構(gòu)如下： 關(guān)鍵特性有： 數(shù)據(jù)采集免配置：agent自發(fā)現(xiàn)、支持Plugin、主動推送模式 容量水平擴展：生產(chǎn)環(huán)境每秒50萬次數(shù)據(jù)收集、告警、存儲、繪圖，可持續(xù)水平擴展。 Zabbix、Nagios、OpenFalcon的整體對比如下： 四、基于k8s容器云背景下的系統(tǒng)監(jiān)控實踐： cAdvisor+Heapster+Influxdb 上面介紹的都是比較傳統(tǒng)的系統(tǒng)監(jiān)控架構(gòu)，在容器時代到來后，對于容器的支持就顯得差強人意了。同時還提供了自己的web頁面，用戶可以通過web頁面直接查看該宿主機上所有容器的監(jiān)控數(shù)據(jù)。 可能有的同學(xué)會問，這樣只是監(jiān)控到了所有計算節(jié)點的容器數(shù)據(jù)和主機性能數(shù)據(jù)，這樣有些非計算節(jié)點的主機監(jiān)控該怎么辦？確實，因為Heapster只是針對于kubernetes集群去監(jiān)控，非kubelet節(jié)點確實是拿不到數(shù)據(jù)的，而我們又不想再用另外一種方式去單獨監(jiān)控主機，那樣得到的數(shù)據(jù)格式也不一樣。Prometheus最初是參照google內(nèi)部監(jiān)控系統(tǒng)BorgMon開發(fā)的，現(xiàn)在最常見的Kubernetes容器管理系統(tǒng)中，通常會搭配Prometheus進行監(jiān)控?；赗ails/SQL的GUI dashboard Exporter