【正文】 過驗(yàn)證的回退預(yù)案運(yùn)維是一門經(jīng)驗(yàn)的學(xué)科、是一門試錯(cuò)的學(xué)科。五、交接和休假最容易出故障接手別人的工作要一而再，再而三的確認(rèn)變更方案，請(qǐng)教人并不見得就是能力不行的表現(xiàn)； 腳本本身就能完成的功能，就沒有必要專門找一個(gè)功能豐富的軟件來做 力爭(zhēng)做出最優(yōu)秀的成績(jī)來，人生的理想才能逐步實(shí)現(xiàn)。八、要有偏執(zhí)狂的精神，方案要檢查，檢查，再檢查有這么一個(gè)人： ① 他在做一個(gè)變更的時(shí)候，會(huì)先提前一兩周發(fā)送郵件并電話手機(jī)通知相關(guān)人② 在測(cè)試機(jī)上寫好腳本，召集大家 review 操作步驟和腳本 ③ 測(cè)試完成以后拷貝到生產(chǎn)環(huán)境④ 登錄對(duì)應(yīng)機(jī)器，“打開，關(guān)閉，打開，關(guān)閉”該腳本⑤ 跟相關(guān)人員再次確認(rèn)執(zhí)行的操作，順序，時(shí)間點(diǎn)，可能的影響和回滾是否都準(zhǔn)備好了⑥ 執(zhí)行前還要退出這個(gè)機(jī)器，然后再登錄進(jìn)去，“打開，關(guān)閉”腳本 ⑦ 最后才在后臺(tái)運(yùn)行腳本，同時(shí)在另外一個(gè)窗口登錄著，隨時(shí)ps和查看結(jié)果輸出期間姿勢(shì)端正，呼吸急促而均勻，眼神凝重。備份有了、可以高忱無憂了嗎？不行！尚須驗(yàn)證備份的有效性。這些好處非常明顯不再多說。網(wǎng)站運(yùn)維將成為一個(gè)融合多學(xué)科（網(wǎng)絡(luò)、系統(tǒng)、開發(fā)、安全、應(yīng)用架構(gòu)、存儲(chǔ)等）的綜合性技術(shù)崗位，給大家提供一個(gè)很好的個(gè)人能力與技術(shù)廣度的發(fā)展空間。最后一點(diǎn)，做網(wǎng)站運(yùn)維需要有探索創(chuàng)新精神，通過創(chuàng)新型思維解決現(xiàn)實(shí)中的問題，因?yàn)檫@是一個(gè)處于幼年的職業(yè)（國(guó)外也一樣，但比國(guó)內(nèi)起步早點(diǎn)），沒有成熟體系或方法論可以借鑒，只能靠大家自已摸索努力。根據(jù)這些特點(diǎn)進(jìn)行內(nèi)核優(yōu)化定制，如sina就在memcache上進(jìn)行過二次開發(fā)，搞出了一個(gè)MemcacheDB，具體做得如何我們不談，但開源了，是值得稱贊的，國(guó)內(nèi)公司對(duì)于開源基本上是索取，沒有貢獻(xiàn)；另外，服務(wù)器也不是大家所熟知的型號(hào)，根據(jù)業(yè)務(wù)特點(diǎn)，大部份都是找DELL/HP/ibm進(jìn)行過定制；另外，在分布式儲(chǔ)存方面都有自已解決方案，要不就是使用現(xiàn)成開源hadoop等解決方案，或自已開發(fā)。參加網(wǎng)絡(luò)學(xué)習(xí)，對(duì)于我們一線教師來說，絕不是為了一時(shí)的興趣，更不是為了完成任務(wù)或是趕時(shí)髦、裝門面。先一般故障后特殊故障。利用網(wǎng)絡(luò)教學(xué)有助于構(gòu)建新型的教學(xué)模式，真正對(duì)教育教學(xué)起到全方位的變革作用。所謂極致，就是要超出用戶的預(yù)期，但只有挖掘用戶潛在的需求，才能做出超出預(yù)期的功能。使用“項(xiàng)目孵化器”可以最大限度解決這個(gè)痛點(diǎn)，只需在平臺(tái)上進(jìn) 行兩個(gè)步驟：第一步填寫業(yè)務(wù)名稱，預(yù)估峰值QPS；第二步選用MySQL、MongoDB、Redis等相關(guān)數(shù)據(jù)庫資源。我們?cè)谑≈蟹此迹庾R(shí)到需求還得從日常工作中去挖掘，平臺(tái)上每個(gè)功能模塊都必須解決用戶的痛點(diǎn)。此外，隨著 服務(wù)器數(shù)量的增多，硬件故障在所難免，架構(gòu)設(shè)計(jì)需要考慮高可用方案，冗余范圍內(nèi)的服務(wù)器故障會(huì)以郵件預(yù)警的方式發(fā)出，避免對(duì)運(yùn)維工程師的騷擾。在這個(gè)過程中，我們經(jīng)歷了兩次重要的升級(jí)。第一次升級(jí)：運(yùn)維工具化運(yùn)維工作中有很多瑣碎的、重復(fù)的事情，初期我們只有兩個(gè)IDC，服務(wù)器數(shù)量有限，項(xiàng)目數(shù)量也較少，靠純手工勞作還可以應(yīng)付。有了監(jiān)控工具和分級(jí)機(jī)制，還需要有好的制度?；ヂ?lián)網(wǎng)精神唯快不破，要圍繞“快”找痛點(diǎn)。兩步之后，Web Server、數(shù)據(jù)庫實(shí)例等所需資源會(huì)瞬間展示在用戶面前，同時(shí)包管理、配置文件管理、代碼發(fā)布系統(tǒng)、監(jiān)控系統(tǒng)等配套輔助功能隨之開通。傳統(tǒng)的運(yùn)維模式，大多是開發(fā)工程師提需求，運(yùn)維工程師滿足需求，運(yùn)維工程師主動(dòng)推進(jìn)的意識(shí)不夠。2017年11月24日我參加了鄂爾多斯市信息辦組織的第四期網(wǎng)絡(luò)運(yùn)維培訓(xùn)。先公共性故障后局部性故障。而是要通過知識(shí)的積淀，充實(shí)自己、完善自己。但90%都是借鑒googleGFS的思想:分布式存儲(chǔ)、計(jì)算、大表。三、怎樣才算是一個(gè)合格的運(yùn)維工程師保證服務(wù)達(dá)到要求的線上標(biāo)準(zhǔn)，%；保證線上穩(wěn)定，這是運(yùn)維工程師的基本責(zé)職所在。運(yùn)維工作的相關(guān)經(jīng)驗(yàn)將會(huì)變得非常重要，而且也將成為個(gè)人的核心競(jìng)爭(zhēng)力，具備很好的各層面問題的解決能力及方案提供、全局思考能力等。應(yīng)該說，自動(dòng)化運(yùn)維是運(yùn)維工程師職業(yè)化的一個(gè)追求，利已利公，雖然這是一個(gè)異常艱巨的任務(wù)：不斷變更的業(yè)務(wù)、不規(guī)范化的應(yīng)用設(shè)計(jì)、開發(fā)模式、網(wǎng)絡(luò)架構(gòu)變更、IDC變更、規(guī)范變動(dòng)等因素，都可能會(huì)對(duì)現(xiàn)有自動(dòng)化系統(tǒng)產(chǎn)生影響，所以需要模塊化、接口化、變因參數(shù)化等因此，自動(dòng)化相關(guān)工作，是運(yùn)維工程師的核心重點(diǎn)工作之一，也是價(jià)值的體現(xiàn)。一個(gè)總有那么幾次、備份無法保證 100% 恢復(fù)，簡(jiǎn)單的驗(yàn)證就是找個(gè)空庫恢復(fù)出來。操作的人不覺得累，倒是一邊觀摩的人很累。要相信，你的夢(mèng)想就在你的前方。但是如果想要在生產(chǎn)環(huán)境下使用起來、請(qǐng)三思！能夠使用系統(tǒng)內(nèi)置命令的話，就不用考慮其他要專門下載安裝的軟件了 要堅(jiān)決杜絕直接在生產(chǎn)環(huán)境做開發(fā)、測(cè)試和bug修復(fù)，這些操作只能在開發(fā)和測(cè)試環(huán)境做，否則一旦出事，將欲哭無淚。筆者通過自己的多年運(yùn)維經(jīng)驗(yàn)，總結(jié)出以下必須遵守的基本運(yùn)維規(guī)則，可以大大減少缺乏經(jīng)驗(yàn)的運(yùn)維人員因?yàn)樽陨硎д`導(dǎo)致系統(tǒng)出故障的可能性。如果真要以后不想做運(yùn)維了，轉(zhuǎn)到其它崗位也比較容易，不會(huì)有太大的局限性。網(wǎng)站各層面監(jiān)控、統(tǒng)計(jì)的覆蓋度，軟件、硬件、運(yùn)行狀態(tài)，能監(jiān)控的都需要監(jiān)控統(tǒng)計(jì)，避免監(jiān)控死角、并能實(shí)時(shí)了解應(yīng)用的運(yùn)轉(zhuǎn)情況。c、如上面所講，目前大型網(wǎng)站運(yùn)維還處于幼年時(shí)期理念和經(jīng)驗(yàn)都比較零散，沒有成熟的知識(shí)體系，可能具體什么是運(yùn)維，大家都要先思索一番，或壓根沒想過，真正討論也只是運(yùn)維工作的冰山一角，局限于具體技術(shù)細(xì)節(jié)，或某某著名網(wǎng)站大的框架，真正運(yùn)維體系化東西沒有，這也許是目前網(wǎng)上運(yùn)維相關(guān)資料比較少的原故吧。達(dá)拉特旗第二期張偉 時(shí)間：2017年12月11日第三篇：大型網(wǎng)站運(yùn)維探討和心得分享大型網(wǎng)站運(yùn)維探討和心得分享看到一篇不錯(cuò)的心得體會(huì)；相信我們做技術(shù)的都會(huì)有或多或少的擔(dān)憂自己的未來職業(yè)發(fā)展，下面和大家一起來探討一下。這些方法十分有助于我理清思路，找到真正的故障所在，能有效的提高工作效率。在新的信息技術(shù)快速發(fā)展的時(shí)代，提前儲(chǔ)備了足夠的知識(shí)，就占領(lǐng)了技術(shù)的前沿，這是我今后努力的方向。例如一個(gè)項(xiàng)目上線前，會(huì)默認(rèn)部署日志收集模塊，收集匯總后進(jìn)行訪問日志自動(dòng)化分析，以時(shí)間維度展示訪問量走勢(shì)，同時(shí)輔以IP地址分析模塊展示地域及運(yùn)營(yíng)商分布。說起來很神奇，但實(shí)現(xiàn)理念很簡(jiǎn)單，我們提煉日常項(xiàng)目中的通用方案，構(gòu)建資源池，在項(xiàng)目發(fā)展初期最小量匹配資源。初期平臺(tái)建設(shè)中，我們從加速流程開始進(jìn)行摸索，以“需求任務(wù)流”為核心，將通用需求規(guī)范流程，統(tǒng)一需求提交頁面，同時(shí)盡量為用戶提供選項(xiàng)，而不是隨意填寫，盡量減少溝通成本，同時(shí)為完全自動(dòng)化打好基礎(chǔ)。第二天的負(fù)責(zé) 人要針對(duì)第一天的報(bào)警找出根本原因，并盡力解決，因?yàn)槿绻麩o法根治，困擾將持續(xù)發(fā)生。大勢(shì)所趨，我們必須進(jìn)行工具化升級(jí)，將重復(fù)的事情自動(dòng)化。我們將運(yùn)維從技術(shù)支持領(lǐng)域升級(jí)，進(jìn)行產(chǎn)品化改進(jìn)，核心目標(biāo)是為了降低運(yùn)維成本、縮短研發(fā)周期、讓產(chǎn)品試錯(cuò)更廉價(jià)。為了減少報(bào)警騷擾，我們分級(jí)處理，將報(bào)警分為郵件預(yù)警、短信報(bào)警和瘋狂短信報(bào)警?；谶@些想法，我們勾畫出了宏偉藍(lán)圖，提供一個(gè)塔基，第一層提供核心基礎(chǔ)服務(wù)，如Web、RDB、NoSQL等；第二層提供通用基礎(chǔ)服務(wù)，構(gòu)造一個(gè)完美的平臺(tái)，讓開發(fā)工程師受益。近期為了進(jìn)一步提升項(xiàng)目試錯(cuò)階段的速度，我們?cè)谄脚_(tái)上推出了一個(gè)新功能：“項(xiàng)目孵化器”。做到信息清晰可見，操控簡(jiǎn)單易用。網(wǎng)絡(luò)就象一個(gè)強(qiáng)大的磁場(chǎng)，深深地吸引著我，影響著我。先表面后里面。在這樣的學(xué)習(xí)情境中，教師可以積極主動(dòng)去探求知識(shí)，保持最旺盛的求知欲望，對(duì)資料的搜集、整理與分析為學(xué)生批判性思維與創(chuàng)造性思維的培養(yǎng)搭建平臺(tái)，有利于建構(gòu)新型的教學(xué)模式。這就是運(yùn)維工作~！最后說一下運(yùn)維工程師的職責(zé)：”確保線上穩(wěn)定“，看似簡(jiǎn)單，但實(shí)屬不容易，運(yùn)維工程師必須在諸多不利因素中進(jìn)行權(quán)衡：新產(chǎn)品模式對(duì)現(xiàn)有架構(gòu)及技術(shù)的沖擊、產(chǎn)品高頻度的升級(jí)帶來的線上BUG隱患、運(yùn)維自動(dòng)化管理承度不高導(dǎo)致的人為失誤、IT行業(yè)追求