【正文】 數(shù)值都可以用短信報(bào)警，你隨時(shí)都可以收到信息。這里只談經(jīng)驗(yàn)，不談詳細(xì)的技術(shù)，因?yàn)槲乙徽f(shuō)我的系統(tǒng)架構(gòu)地球人都知道我是哪個(gè)公司的了，雖然已經(jīng)離職，但是咱也有個(gè)職業(yè)道德，謝謝。 MSN 報(bào)警，還是不錯(cuò)的吧 ，手機(jī)報(bào)警一類(lèi)的辦法都是不錯(cuò)的。哪怕正常，你也找相關(guān)的人確認(rèn)一下吧，一個(gè) 100m口跑 80M,估計(jì)電信的人都來(lái)找你了。 作為 IDC 工程師，我們所要關(guān)注的東西就是個(gè)流量了，我們要很清楚某臺(tái) 65 下的某臺(tái) 35 上每個(gè)口的應(yīng)用，當(dāng)遭受攻擊或者流量異常的時(shí)候，一眼就能知道是怎么回事。 要是要監(jiān)控服務(wù)一類(lèi)的，那就只好啟用大名鼎鼎的 nagios,和一些牛 x 人基于這個(gè)做的一些別的商業(yè)軟件。 表上寫(xiě)的非常清楚你哪個(gè)機(jī)架沒(méi)有哪個(gè) 機(jī)器，哪個(gè)機(jī)器不在特定的位置上，哪個(gè)機(jī)器缺少??等等 這樣比如說(shuō)，機(jī)器位置不對(duì)扣 5塊錢(qián)工資，機(jī)器 IP 不對(duì)扣 2 塊錢(qián)工資，或者??反正扣到最后??這月不給發(fā)工資了，還得倒貼點(diǎn)??哈哈哈 六，監(jiān)控架構(gòu) 監(jiān)控架構(gòu)其實(shí)每個(gè)地方都有自己的做法，我也知道我的辦法不是很先進(jìn)，但是仍然拿出來(lái)和大家一起討論 首先談?wù)劚O(jiān)控軟件，一說(shuō)起這個(gè)常用的東西 MRTG,cacti一類(lèi)的就都可以用了。完成后把數(shù)據(jù)導(dǎo)出后重新整理分析。然后買(mǎi)個(gè)掃描槍?zhuān)统心欠N一樣，不過(guò)你要買(mǎi)有存儲(chǔ)功能的，否則你要端著筆記本去掃描， SB 了。所以黑莓手機(jī)或者 NOKIA 手機(jī)（別的我沒(méi)用過(guò)）都有掃描條碼的功能??好像與主題無(wú)關(guān)?? 那么剩下的就簡(jiǎn)單了。 怎么辦？ 庫(kù)房管理的工作用上了，哈哈。為啥，因?yàn)橐弥Y產(chǎn)表一個(gè)一 個(gè)核對(duì)，面對(duì)幾千個(gè)機(jī)器，直接暈倒。 5，還是 IDC的工作。 比如說(shuō)，監(jiān)控人員沒(méi)有登錄權(quán)限，或者 IDC 人員沒(méi)有登錄權(quán)限一類(lèi)。省的還得管理服務(wù)器密碼。 企業(yè)可以開(kāi)發(fā)一個(gè)軟件，在裝機(jī)的時(shí)候安裝到服務(wù)器上。把 FWQSHXXB31WEBSERVER123234把這個(gè)作為你的 HOSTS信息， windows里叫做計(jì)算機(jī)名 這樣遠(yuǎn)程上來(lái)都非常清晰自己在哪個(gè)服務(wù)器上，出問(wèn)題時(shí)候也非常容易找到這個(gè)機(jī)器，不要閑麻煩，一切的 麻煩都是為了以后快速的解決 down 機(jī)問(wèn)題而做的。這 2 個(gè)標(biāo)簽?zāi)憧梢苑珠_(kāi)也可以在一張標(biāo)簽上寫(xiě)清楚。 一般是機(jī)器正面某個(gè)地方，然后是機(jī)器屁股后面某個(gè)地方，然后機(jī)器側(cè)面把手的地方，粘貼 3個(gè)，以防掉了就煩了。這樣這個(gè)服務(wù)器走到哪里，都有備案和記錄。 有歷史吧?? .2，送到機(jī)房 看過(guò)我這個(gè)服務(wù)器去過(guò)的地方，羨慕不？見(jiàn)證我們公司的發(fā)展 史。比如我們的資產(chǎn)號(hào)， FWQ123456 服務(wù)器－ 123456，這是一個(gè)總的資產(chǎn)號(hào)，這個(gè)服務(wù)器哪怕搬到美國(guó)，也是這 1 個(gè)資產(chǎn)，直到丟失，或者拋棄，都是這一個(gè)資產(chǎn)，永遠(yuǎn)不會(huì)變。 五，資產(chǎn)統(tǒng)計(jì) 假如你的機(jī)器只有 2021 臺(tái)反而好容易管理了，但是現(xiàn)在我要管理的全國(guó) IDC有 31 個(gè)，平均每個(gè)機(jī)房有不同品牌服務(wù)器 1500臺(tái)。 想來(lái)想去這里也沒(méi)啥值得關(guān)注的地方。 你可以隨便扎，或者和給你老婆梳頭一樣，好好扎。 簡(jiǎn)單辦法就是電源線(xiàn)扎一邊，網(wǎng)線(xiàn)扎一邊。這時(shí)候還是盡量把他扎一下吧。 windows就是個(gè)讓 IT 人當(dāng)裝機(jī)男，挨踢人當(dāng)民工。（ 51CTO 編輯注：其實(shí)現(xiàn)在已經(jīng)有很多無(wú)人值守安裝系統(tǒng)的管理軟件， 比如 KickStart 和現(xiàn)在流行的Cobbler，都是不錯(cuò)的批量安裝工具，而且都是開(kāi)源的。還有更多的辦法，只是暫時(shí)沒(méi)想到，大家也可以談?wù)撟约旱霓k法。但是弱點(diǎn)是后續(xù)的軟件需要自己裝。然后所有的服務(wù)器遠(yuǎn)程運(yùn)營(yíng)這一個(gè) ISO,最好多弄幾臺(tái)，否則一臺(tái)機(jī)器弄的慢死。 IBM 和 DELL 現(xiàn)在也都有這個(gè)功能，但是你在分發(fā)以前，還是得一臺(tái)一臺(tái)機(jī)器插上網(wǎng)線(xiàn)，配置好 BIOS的 IP，痛苦。前提你得一臺(tái)一臺(tái)配置好 BIOS 里的 ILO2。這樣，還是比裝系統(tǒng)來(lái)的快。可以自己買(mǎi)一個(gè)研 究研究了，我們公司以人為本，從來(lái)不買(mǎi)這類(lèi)高科技。估計(jì)直接崩潰。當(dāng)然啦， KVM 是可以級(jí)聯(lián)的，我最牛一次一次一套鍵盤(pán)安裝 166 臺(tái)機(jī)器。吼吼。然后等你在去關(guān)注這個(gè)機(jī)器的時(shí)候，已經(jīng)可以設(shè)置 IP 插網(wǎng)線(xiàn)了。 我的辦法是，我一看 TMD 全部是 DVD， IBM 的機(jī)器直接佩 bo，公司給我們發(fā)的全部是 CD，娘的，典型的沒(méi)有最慢只有更慢，出了問(wèn)題閑你慢的領(lǐng)導(dǎo)班子。一臺(tái)機(jī)器裝完大約要 1 小時(shí)多點(diǎn)。但是我們公司一般是機(jī)器到了 ，最多 2－ 3 天就要要，一向是那種計(jì)劃不如變化快的沒(méi)有計(jì)劃沒(méi)有進(jìn)度管理的“小”公司，項(xiàng)目組拿著雞毛當(dāng)令箭，牛 x哄哄的公司。結(jié)果忘記拔網(wǎng)線(xiàn)，導(dǎo)致人家說(shuō)我們是插了網(wǎng)線(xiàn)打補(bǔ)丁，有中毒的危險(xiǎn)，需要重裝。于是我們就光盤(pán)堆成山。我自己是郁悶郁悶到了，莫名問(wèn)題的時(shí)候，你就知道 GHOST還是靠不住的。你就看著上吧。你服務(wù)器到了，賣(mài)賣(mài)箱子請(qǐng)大家吃飯吧。 于是人家 2 隊(duì)人找來(lái)了 30 多號(hào)人，一早上把 2021 臺(tái)機(jī)器全部拆箱子完畢放到機(jī)柜上。而且，一定要把服務(wù)器搬到你指定的地方再簽字收貨，否則??嘿嘿?? 我最霉氣的是：來(lái)了 20 臺(tái)機(jī)器（還好不多），下著 大雨人家給我往院子里一丟，讓我自己搬上 19樓，我沒(méi)推車(chē)沒(méi)啥的?? 你可以說(shuō)，找電信的幫忙撒，廢話(huà)，這個(gè)我還不知道。因?yàn)樗拓浀亩际欠?wù)器廠(chǎng)商找的，你因?yàn)檫@個(gè)事情去聯(lián)系廠(chǎng)商修改送貨地址，至少要多等 N 小時(shí)。 三，服務(wù)器上架 好了，要是你買(mǎi)的服務(wù)器到了，你會(huì)發(fā)現(xiàn)你接到電話(huà)后，樓下一個(gè) N 大的“擎天柱”集裝箱車(chē)給你送服務(wù)器來(lái)??（某次我收 2021臺(tái)服務(wù)器就是這樣的陣勢(shì)）；在這里有個(gè)重大的提示，你們財(cái)務(wù)給廠(chǎng)商下單的時(shí)候，收貨地址一定要寫(xiě)對(duì)。 還有機(jī)柜電力，現(xiàn)在的機(jī)柜放置 16 臺(tái) 1U 的服務(wù)器是正好，多了過(guò)于熱，少了資源浪費(fèi)；但是你發(fā)現(xiàn)人家只讓你用 10 安培電力，過(guò)了要交錢(qián)買(mǎi)電； 或者不限制你用電，但是插線(xiàn) 板只有 10 個(gè)，你還真買(mǎi)個(gè)托線(xiàn)板去轉(zhuǎn)接？你要想想你一個(gè)托線(xiàn)板掛了，你服務(wù)器要掛幾個(gè)？ 最后，我的一個(gè)機(jī)房包間里 140 個(gè)機(jī)柜， 2 個(gè)空調(diào)，結(jié)果某天掛了一個(gè)空調(diào)，雖然 6 小時(shí)人家 IDC 商就給更換了一個(gè)空調(diào)機(jī)（這速度已經(jīng)非?？炝耍?， 結(jié)果我機(jī)器至少被熱死了 100 臺(tái)以上，機(jī)器是 HP 的，機(jī)器過(guò)熱，HP 會(huì)自動(dòng)關(guān)機(jī)，而且會(huì)不讓你啟動(dòng)。 最后你要知道現(xiàn)在的中國(guó)還是賣(mài)方市場(chǎng)，你給人家牛，那你買(mǎi)的產(chǎn)品只能是??蒙牛然后是開(kāi)始去參觀(guān)機(jī)房 細(xì)心的檢查一下空調(diào)數(shù)量，空調(diào)出廠(chǎng)和最后維護(hù)日期，網(wǎng)絡(luò)布線(xiàn)類(lèi)型和架構(gòu)，是否可擴(kuò)展，主備從電力等。哈哈。 提著東西拜訪(fǎng)一下服務(wù)商老大是禮節(jié)性的東西，東西不在多而在精，這樣你未來(lái)談事情人家也給你綠色通道，做事情要好做很多。 然后你就可以電話(huà)或者自己提著禮品登門(mén)拜訪(fǎng)一下 IDC 服務(wù)商的老大了 當(dāng)然，你也可以找代理服務(wù)商，因?yàn)樗麄兡玫降膬r(jià)錢(qián)有時(shí)候比電信或者網(wǎng)通給你的價(jià)錢(qián)低，但是，關(guān)鍵還是一個(gè)服務(wù)，因?yàn)槟惝吘狗?wù)器放在那，晚上關(guān)鍵著急沒(méi)人給你重啟，機(jī)器出了問(wèn)題其實(shí)按個(gè) F1就可以解決的問(wèn)題，服務(wù)商的值班人員不懂。 當(dāng)然，你也可以到你目標(biāo)服務(wù)的地方，找個(gè)可以上網(wǎng)的地方進(jìn)行網(wǎng)絡(luò)測(cè)試，比如說(shuō)網(wǎng)吧包個(gè)機(jī)器?? 好了，網(wǎng)絡(luò)測(cè)試完了。 我的做法是在全國(guó)各個(gè)機(jī)房的服務(wù)器用 pingplus 這個(gè)軟件進(jìn)行一周的的流量測(cè)試。畢竟， 雖說(shuō)全國(guó)已經(jīng)互聯(lián)了，但是各地的網(wǎng)速還是有差異的。我做的最弱智的一件事情就是，來(lái)了 400 臺(tái)服務(wù)器， 50 個(gè)交換機(jī)， 8 臺(tái)EMC，我一個(gè)人花了一星期把箱子才全部拆完?? 機(jī)器選型的時(shí)候你也要為自己考慮，比如 HP 的 ILO 功能，可以讓你遠(yuǎn)程 BIOS級(jí)操作服務(wù)器，比如浪潮的自動(dòng)資產(chǎn)管理等等，為自己管理服務(wù)器提供便利，否則機(jī)器 10 來(lái)臺(tái)還好， 100 臺(tái)還一般，我這里 3萬(wàn)來(lái)臺(tái)，我不死幾百遍了。讓你公司的財(cái)務(wù)或者采購(gòu)出馬砍價(jià)付錢(qián)就是了。我告訴供貨商 需要 200臺(tái)服務(wù)器，一個(gè) F5， 10 臺(tái) CISCO2960 交換機(jī)， 3個(gè) NETSREEN206防火墻，一個(gè) EMCCX500+滿(mǎn)硬盤(pán)那么不到 3天， 所需要的 4臺(tái)測(cè)試服務(wù)器，就送來(lái)了??當(dāng)然，不要牛了這么多最后只買(mǎi) 1 臺(tái)，那么你晚上走夜路會(huì)被人打的。 哪些服務(wù)器可以放在一個(gè)防火墻下，哪些服務(wù)器不用防火墻保護(hù)，哪些服務(wù)器是內(nèi)網(wǎng)服務(wù)器， 需要什么樣的網(wǎng)絡(luò)連接，最好是畫(huà)出大致拓?fù)?，方便你預(yù)算設(shè)備花費(fèi)。 網(wǎng)絡(luò)架構(gòu) 站點(diǎn)現(xiàn)在是一臺(tái)獨(dú)立服務(wù)器，未來(lái)采用的是分布式架構(gòu)，比如， ?? mysql 是一臺(tái)服務(wù)器。當(dāng)然你網(wǎng)站的流量比我要大的多，那你可以買(mǎi)的更好一點(diǎn)的服務(wù)器。 那么你可以得到你大致配置，其 實(shí)市面上的標(biāo)準(zhǔn)服務(wù)器配置都足夠你用了，比如現(xiàn)在的 DELL1950,HPDL360G5,IBMX？？？（忘記了） 等服務(wù)器，足夠我跑一個(gè)這樣簡(jiǎn)單的網(wǎng)站。這要先看你的網(wǎng)站是做什么的，每日有多少的人數(shù)訪(fǎng)問(wèn)，例如，我打算站點(diǎn)初期每日有 20210左右的訪(fǎng)問(wèn)量，和 1000 人左右的并發(fā)量。 以下是一些實(shí)際經(jīng)驗(yàn)，發(fā)給大家做參考，有任何問(wèn)題可以 mail 我， 有的東西是企業(yè)機(jī)密，我不能透露也不能給你相關(guān)文檔。作為一個(gè) SA，你肯定經(jīng)歷過(guò)通宵好幾天加班做事，你肯定經(jīng)歷過(guò)飯買(mǎi)來(lái)已經(jīng)忘記了吃，你肯定經(jīng)歷過(guò)幾天加班沒(méi)睡覺(jué)，著個(gè)沙發(fā)坐下就失去知覺(jué)睡倒??沒(méi)有經(jīng)歷過(guò)不能說(shuō)你不好，只能說(shuō)你管理的機(jī)器太少。網(wǎng)絡(luò)工程師需要，機(jī)房網(wǎng)絡(luò)骨干交換機(jī)故障，整個(gè)機(jī)房所有服務(wù)器無(wú)法連接，需要快速響應(yīng)不？系統(tǒng)工程師需要，系統(tǒng)出問(wèn)題了，要快速響應(yīng)不？安全工程師需要，服務(wù)器被攻擊了，要快速響應(yīng)不？存儲(chǔ)工程師需要，公司核心存儲(chǔ)有問(wèn)題了，要快速響應(yīng)不？ 你可以做研發(fā)，出了問(wèn)題可以測(cè)試，可以想辦法慢慢解決；你可以做 DBA，出了問(wèn)題可以推到網(wǎng)絡(luò)工程師或者系統(tǒng)工程師身上，說(shuō)不是DB 連接問(wèn)題；你可以做測(cè)試工程師，你說(shuō)有問(wèn)題這個(gè)東西就可以不上線(xiàn)??在出問(wèn)題的時(shí)候，倒霉的就是 SA，所以不要再爭(zhēng)論 SA 包含哪些工作， SA 就是一個(gè)倒霉的快速響應(yīng)者，你想，哪個(gè) SA24 小時(shí)不開(kāi)手機(jī)？哪個(gè) SA 晚上可以舒服的睡覺(jué)或者安心的出去度假？走在路上一聽(tīng)到和自己手機(jī)短信鈴聲一樣的，利馬下意識(shí)的抓出自己的手機(jī)看看是不是服務(wù)器報(bào)警；晚上和老婆 XXOO00，一個(gè)電話(huà)過(guò)來(lái)，立馬停下，抓出手機(jī) 看流量圖；包里放著筆記本，但是因?yàn)檫€要開(kāi)機(jī)，太慢，拿著手機(jī)上 puttyping或者 tel機(jī)器?? 這就是大家羨慕的 SA，你也不要抱怨自己做了 SA，生活就是這樣。我把 SA 的定義成： speedinessanswer 而不是 systemadmin。這仍舊是我給大家的建議。雖然說(shuō)完就知道這個(gè)面試白來(lái)了，但是我還是想為廣大的運(yùn)維工程師出口氣。我說(shuō)對(duì)，正是需要我們這些什么都會(huì)的人領(lǐng)導(dǎo)什么都精的人。 因?yàn)楝F(xiàn)在的公司都在用招聘民工的錢(qián)招聘神仙，其次我也是想讓各位看看，運(yùn)維工程師要擔(dān)負(fù)多少責(zé)任。否則過(guò)了 32 歲，沒(méi)有公司要你。 10，運(yùn)動(dòng)員 不要回家就睡覺(jué)，有空還是運(yùn)動(dòng)下吧；在服 務(wù)器 down 機(jī)的時(shí)候，機(jī)房恰巧就你一個(gè)人，機(jī)柜沒(méi)有空間，你需要更換一臺(tái) HP5854U 的服務(wù)器，滿(mǎn)配約 80公斤的服務(wù)器，你怎么做？ 11，責(zé)任心 這個(gè)我不想說(shuō)什么，這是你的職業(yè)精神。你要能和各個(gè)兄弟部門(mén)關(guān)系非常的密切，出了問(wèn)題有兄弟幫你擔(dān)責(zé)任；也要能非常扯皮，沒(méi)事在會(huì)議上把別人都搞定。 6，研發(fā)人員的工作 運(yùn)維工具都需要自已開(kāi)發(fā)，熟悉開(kāi)發(fā)語(yǔ)言，需要有過(guò)實(shí)際開(kāi)發(fā)經(jīng)驗(yàn)，否則工作會(huì)非常痛苦，我深有體會(huì)。 3，安全工程師的工作 我不要求你一定要會(huì)各種網(wǎng)絡(luò)編程，但是在服務(wù)器收攻擊的情況下，沒(méi)有防火墻的情況下，做一些簡(jiǎn)單的處理工作。運(yùn)維工程師至少要能做以下的工作： 1，網(wǎng)絡(luò)工程師的 工作 你至少要能配置 CISCO6509 以下的設(shè)備，熟悉各種網(wǎng)絡(luò)協(xié)議，否則網(wǎng)絡(luò)出問(wèn)題的時(shí)候你會(huì)傻掉。你對(duì)的我肯定會(huì)向你學(xué)習(xí)。 以下是個(gè)人觀(guān)點(diǎn)，我說(shuō)的只是我自己的想法，也是我發(fā)展的目標(biāo)。所以我現(xiàn)在已經(jīng)能夠純熟維護(hù)公司