【正文】 ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 6chunkserver cache client 單進程 real user sys real user sys real user sys 6chunkserver cache client 10 并發(fā)進程 最長時間： real user sys 最長時間： real user sys 最長時間： real user sys 6chunkserver cache client 50 并發(fā)進程 最長時間： real user sys 最長時間： real user sys 最長時間： real user sys 6chunkserver cache client 100 并發(fā)進程 最長時間： real user sys 最長時間： real user sys 最長時間： real user sys 6chunkserver cache remote client 10 并發(fā)進程 最長時間： real user sys 最長時間： real user 。 停止原先的那個元數(shù)據(jù)服務器（關閉計算機或停止它的網(wǎng)絡服務）。我們可以通過備份這個目錄的全部文件，來保障整個 MFS 文件系統(tǒng)的可靠性。默認的回收時間為 7 天（ 604800 秒 ） 修改回收時間為 10 分鐘 mfsrsettrashtime 600 /mnt/mfs 七、開機自動掛接 MFS 創(chuàng)建文件 /etc/,加入如下內容： . !/bin/sh /sbin/kldload /usr/local/modules/ /usr/local/mfs/bin/mfsmount h 就能實現(xiàn)開機或重啟系統(tǒng)自動掛接 MFS 文件系統(tǒng)。如果加載不成功，請檢查是否存在模塊文件 . 檢查 fusefs 模塊是否被加載到內核： 如果沒有類似上面館的輸出，就表明 fusefs 模塊沒有加載成功。 一、安裝 fuse 解包 tar zxvf 切換目錄 cd . 配置 ./configure 編譯安 裝 make； make install 如果系統(tǒng)已經安裝了 fuse,則跳過這個步驟。通過查看目錄 /usr/local/mfs/bin 目錄的文件，應該發(fā)現(xiàn)如圖811 所示的文件： 圖 211 安裝 MFS 客戶端生成的文件 二、掛接和使用 MFS 文件系統(tǒng) 創(chuàng)建掛接點 mkdir /mnt/mfs。對比前面的操作過程，客戶端掛接后使用 MFS 集群文件系統(tǒng)才是最費時的事情。為了使 mfs 擁有寫目錄的權限，需要修改目錄的屬主。作者舉的例子是創(chuàng)建一個大文件，然后掛接在本地，這不是個好主意，只能用來做實驗了。 ◆查看日志服務器的工作目錄，正常情況應該看見已經有文件生成了（從元數(shù)據(jù)服務器獲取過來的）。 （４） META_DOWNLOAD_FREQ = 24 元數(shù)據(jù)備份文件下載請求頻率。為保證其可靠性，最好單獨放置?，F(xiàn)在我們可以通過 3 個方 面來檢查一下 MFS master 的運行狀況： 檢查進程 ，運行結果如圖 26 所示： 圖 86 檢查 MFS master 進程運行情況 檢查網(wǎng)絡狀態(tài)，運行結果如圖 27 所示： 圖 87 MFS master 監(jiān)聽端口 檢查系統(tǒng)日志，輸入內容如圖 28 所示： 畢業(yè)設計（論文）報告紙 共 11 頁 第 7 頁 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 圖 28 MFS master 啟動后的系統(tǒng)日志輸入 MFS 的日志會直接寫入系統(tǒng)日志。 MATOCU_LISTEN_PORT = 9421 元數(shù)據(jù)服務器在 9421 端口監(jiān)聽，用以接受客戶端對 MFS進行遠程掛接（客戶端以 mfsmount 掛接 MFS） DATA_PATH = /usr/local/mfs/var/mfs 數(shù)據(jù)存放路徑，只元數(shù)據(jù)的存放路徑。與 版本不同的是： 版安裝完成只有模版文件，其后綴形如 。 Chunk 服務器告知客戶端數(shù)據(jù)寫入成功。在多個客戶端讀取數(shù)據(jù)時，讀取點（ chunk server）有可能被分散到不同的服務器?？蛻舳恕浞?master 服務器的變化日志文件，文件類型為 changelog_ml.*.mfs。 MFS 特性 （ 根據(jù)官方網(wǎng)站翻譯 ） ★ 高可靠性（數(shù)據(jù)能被分成幾個副本存儲在不同的計算機里）。 MFS 的安裝、部署、配置相對于其他幾種工具來說，要簡單和容易得多。 盡管用 rsync方式同步數(shù)據(jù)到另外一個服務器上做 nfs服務的備份，但這對提高整個系統(tǒng)的性能毫無幫助。 5 結論 ............................................................................................................. 錯誤 !未定義書簽。 軟件故障模擬方案 ........................................................................... 錯誤 !未定義書簽。 錯誤類型分析 ........................................................................ 錯誤 !未定義書簽。 故障、錯誤、失效概念 ........................................................ 錯誤 !未定義書簽。 可靠度的重要性 .................................................................... 錯誤 !未定義書簽。由于科學技術的不斷的發(fā)展 ，硬件成本不斷的降低，大容量硬盤已經價格低廉，而傳統(tǒng)的存儲價格沒有降低，于是有了利用硬盤價格便宜，用本地磁盤當存儲的分布式存儲的解決方案，來應對現(xiàn)在的形式。 1TB 的存儲空間的成本要 5000，而現(xiàn)在互聯(lián)網(wǎng)海量的視屏文件，上 EB 的存儲空間，其主要的收入來自于廣告，而版權，帶寬是其主要的支出，加上運營，損耗，傳統(tǒng)的存儲方式成本實在太高，無法使用，于是需要使用低成本，高性能的解決方案。 可靠性 ............................................................................................... 錯誤 !未定義書簽。 模擬方法選擇 ................................................................................... 錯誤 !未定義書簽。 錯誤、故障細化分析和模擬 ........................................................... 錯誤 !未定義書簽。 功能故障分析 ........................................................................ 錯誤 !未定義書簽。 硬件故障模擬方案 ........................................................................... 錯誤 !未定義書簽。 圖 81 為某個 集群使用nfs 共享 的情形 ： 用 戶負 載 均 衡 器 W e b 服 務 器N F S 備 份 服 務 器m y s q l 服 務 器N F S 服 務 器掛 接 n f s 圖 11 多個應用共享 nfs 文件系統(tǒng) 這種架構除了性能問題而外，還存在單點故障，一旦這個 NFS 服務器發(fā)生故障，所有靠共享提供數(shù)據(jù)的應用就不再可用。為什么要選它呢？我來說說我的一些看法： 實施起來簡單。 我在實驗過程中得到作者的幫助，這讓我很是感激。元數(shù)據(jù)日志服務器。 這既減輕了元數(shù)據(jù)服務器的壓力，同時也大大增加了整個系統(tǒng)的吞吐能力。 Chunk 服務器之間同步成功。 make install 配置元數(shù)據(jù)服務 畢業(yè)設計（論文）報告紙 共 11 頁 第 5 頁 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 元數(shù)據(jù)服務器的配置文件被放置于安裝目錄 /usr/local/mfs/etc。 執(zhí)行命令 /usr/local/mfs/sbin/mfsmaster start ，如果沒有意外，元數(shù)據(jù)庫服務器就應該作為一個守護進程運行起來。 元數(shù)據(jù) 日志 服務器安裝和配置 元數(shù)據(jù)日志服務為 mfs 以后版本新增的服務，即可 以把元數(shù)據(jù)日志保留在元數(shù)據(jù)服務器，也可以單獨存儲。在做元數(shù)據(jù)恢復時 ，僅僅需要最近的那個日志文件備份，因此默認的日志個數(shù)就足夠了，這也保證了日志備份不會寫滿整個分區(qū)。 ◆察看元數(shù)據(jù)服務器網(wǎng)絡連接，可以看見日志服務器連接到元數(shù)據(jù)服務器的 tcp 9419 端口。每個服務器用來分配給 MFS 使用的空間最好是一個單獨的硬盤或者一個 raid 卷，最低要求是一個分區(qū)。在我的服務器上，只有一個 1T 的 SATA 硬盤，分了一個 800G 容量的分區(qū)來做為 MFS 存儲服務的組成部分。 MFS 客戶端的安裝及配置 我的生產環(huán)境，只有 centos 和 freebsd 兩種環(huán)境，因此下面的描述，只有 centos 及 freebsd 掛接 MFS 文件系統(tǒng)的情形，其他類型的 unix 系統(tǒng)，待日后嘗試。 make install ◆檢查 MFS 客戶端安裝的結果。默認的回收時間為 7 天（ 604800 秒 ） 修改回收時間為 10 分鐘 mfsrsettrashtime 600 /mnt/mfs 把掛接命令追加到文件 /etc/，可實現(xiàn)開機自動啟動掛接 MFS. freebsd 作為 MFS 客戶端 Freebsd安裝和掛接 MFS集群文件系統(tǒng) ,比 centos操作起來要復雜一些 .mfsmount需要依賴 fuse,并且需要在內核中加載 fusefs 模塊。 三、 加載內核模塊 fuse 加載 fusefs 模塊 kldload /usr/local/modules/ 。 設置副本數(shù)目 mfsrsetgoal 3 /mnt/mfs 查看設置是否如我所愿 mfsgetgoal /mnt/mfs/serydir/ /mnt/mfs/serydir/: 3 設置刪除文件后空間回 收時間。 測試元數(shù)據(jù)服務器 元數(shù)據(jù)服務器最重要的文件在目錄 /usr/local/mfs/var/mfs ， MFS 每一個數(shù)據(jù)的變化，都被記錄在這個目錄的文件里。 從當前的元數(shù)據(jù)服器（ｍａｓｔｅｒ）或日志備份服務器 (mfsmetalogger)復 制備份文件 ( 需要定時用 crontab 備份 ). 從當前的元數(shù)據(jù)服器（ｍａｓｔｅｒ）或日志備份服務器 (mfsmetalogger)復制元數(shù)據(jù)服務器數(shù)據(jù)目錄（ /usr/local/mfs/var/mfs）到這個新的元數(shù)據(jù)