【正文】 acity Mounted on /dev/ad4s1a 26G 570M 24G 2% / devfs 0B 100% /dev /dev/ad4s1g 356G 157G 170G 48% /data /dev/ad4s1f 17G 215M 15G 1% /home /dev/ad4s1d 28G 25G 4% /usr /dev/ad4s1e 24G 362M 21G 2% /var /dev/fuse0 256G 11% /mnt/mfs 進(jìn)入目錄 /mnt/mfs，我們可以看見(jiàn)前面步驟用 centos 上傳到分布式文件系統(tǒng) MFS 里的文件。 設(shè)置文件副本數(shù)量，建議以 3 份為佳。 設(shè)置副本數(shù)目 mfsrsetgoal 3 /mnt/mfs 查看設(shè)置是否如我所愿 mfsgetgoal /mnt/mfs/serydir/ /mnt/mfs/serydir/: 3 設(shè)置刪除文件后空間回 收時(shí)間。默認(rèn)的回收時(shí)間為 7 天（ 604800 秒 ） 修改回收時(shí)間為 10 分鐘 mfsrsettrashtime 600 /mnt/mfs 七、開(kāi)機(jī)自動(dòng)掛接 MFS 創(chuàng)建文件 /etc/,加入如下內(nèi)容： . !/bin/sh /sbin/kldload /usr/local/modules/ /usr/local/mfs/bin/mfsmount h 就能實(shí)現(xiàn)開(kāi)機(jī)或重啟系統(tǒng)自動(dòng)掛接 MFS 文件系統(tǒng)。 3 破壞性測(cè)試 測(cè)試對(duì)象包括數(shù)據(jù)存儲(chǔ)服務(wù)器 chunkserver 和元數(shù)據(jù)服務(wù)器 master。 測(cè)試數(shù)據(jù)存儲(chǔ)服務(wù)器 我用 5 個(gè)服務(wù)器組成了 MFS 的存儲(chǔ)平臺(tái)，其中一個(gè)是 master,其余四個(gè)服務(wù)器是 chunkserver。先停止一個(gè) chunkserver 服務(wù)，然后在某個(gè) MFS 客戶端往掛接點(diǎn)的目錄（ /mnt/mfs）里復(fù)制數(shù)據(jù)或者創(chuàng)建目錄 /文件、或者讀取文件、或者刪除文件，觀察操作是否能正常進(jìn)行。再停止第 2 個(gè)chunkserver，重復(fù)執(zhí)行上述操作；然后再停止第 3 個(gè)服務(wù)器，執(zhí)行類似的文件讀些操作。減少chunkserver試驗(yàn)后，我們?cè)賮?lái)逐步增加 chunkserver服務(wù)器 ,然后對(duì) MFS執(zhí)行讀寫(xiě)等相關(guān)訪問(wèn)操作，檢驗(yàn)其正確性。 通過(guò)增減 chunkserver 服務(wù)器的測(cè)試，服務(wù)的可靠性確實(shí)不錯(cuò)，哪怕只剩下最后一個(gè)服務(wù)器， 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 17 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 也能正常提供存儲(chǔ)訪問(wèn)服務(wù)。 測(cè)試元數(shù)據(jù)服務(wù)器 元數(shù)據(jù)服務(wù)器最重要的文件在目錄 /usr/local/mfs/var/mfs ， MFS 每一個(gè)數(shù)據(jù)的變化，都被記錄在這個(gè)目錄的文件里。我們可以通過(guò)備份這個(gè)目錄的全部文件，來(lái)保障整個(gè) MFS 文件系統(tǒng)的可靠性。在正常情況下，元數(shù)據(jù)服務(wù)器的改變?nèi)罩疚募?(changelogs) 實(shí)時(shí)地、自動(dòng)地復(fù) 制到所有的數(shù)據(jù)存儲(chǔ)服務(wù)器，并且以 changelog_csback.*.mfs 的形式命名。換句換說(shuō)，即使元數(shù)據(jù)服務(wù)器報(bào)廢了，也能再部署一個(gè)元數(shù)據(jù)服務(wù)器，然后從數(shù)據(jù)存儲(chǔ)服務(wù)器chunkserver 及備份服務(wù)器 mfsmetalogger 取得恢復(fù)所需要的文件。 ◆ 本地測(cè)試 停止元數(shù)據(jù)服務(wù) /usr/local/mfs/sbin/mfsmaster 備份元數(shù)據(jù)服務(wù)器數(shù)據(jù) cd /usr/local/mfs/var。 tar czvf mfs 刪除目錄 mv mfs 或 rm –rf mfs 啟動(dòng)元數(shù)據(jù)服務(wù) ../sbin/mfsmaster start 啟動(dòng)失敗，提示不能初始化數(shù)據(jù)。 解包 tar zxvf 執(zhí)行恢復(fù)操作 .. /sbin/mfsmetarestore – a 啟動(dòng)元數(shù)據(jù)服務(wù) ../sbin/mfsmaster start 在 MFS 客戶端檢查 MFS 存儲(chǔ)的數(shù)據(jù)是否跟恢復(fù)前一致？能否正常訪問(wèn)等等。 ◆ 遷移測(cè)試 安裝新的 MFS 元數(shù)據(jù)服務(wù)器。 從當(dāng)前的元數(shù)據(jù)服器（ｍａｓｔｅｒ）或日志備份服務(wù)器 (mfsmetalogger)復(fù) 制備份文件 ( 需要定時(shí)用 crontab 備份 ). 從當(dāng)前的元數(shù)據(jù)服器（ｍａｓｔｅｒ）或日志備份服務(wù)器 (mfsmetalogger)復(fù)制元數(shù)據(jù)服務(wù)器數(shù)據(jù)目錄（ /usr/local/mfs/var/mfs）到這個(gè)新的元數(shù)據(jù)服務(wù)器。 停止原先的那個(gè)元數(shù)據(jù)服務(wù)器（關(guān)閉計(jì)算機(jī)或停止它的網(wǎng)絡(luò)服務(wù)）。 更改新的元數(shù)據(jù)服務(wù)器的 ip 為原來(lái)那個(gè)服務(wù)器的 ip. 執(zhí)行數(shù)據(jù)恢復(fù)操作，其命令為： mfsmetarestore m o changelog_ml.*.mfs。mfsmetarestore a 恢復(fù)成功后再執(zhí)行啟動(dòng)新的元數(shù)據(jù)服務(wù)操作。 啟動(dòng)新的元數(shù)據(jù)服務(wù) /usr/local/mfs/sbin/mfsmaster start 在 MFS 客戶端檢查 MFS 存儲(chǔ)的數(shù)據(jù)是否跟恢復(fù)前一致？能否正常訪問(wèn)等等。 注意 :如果元數(shù)據(jù)服務(wù)不是以命令 mfsmastar stop 方式停止的話 ,再次重啟會(huì)出現(xiàn)意外 ,因此需要先執(zhí)行 mfsmetarestore – a 然后再啟動(dòng) . 4 性能測(cè)試 這里不打算介紹具體的測(cè)試過(guò)程，老實(shí)說(shuō)，我也沒(méi)仔細(xì)做過(guò)對(duì)比測(cè)試。因此這里收錄網(wǎng)友 jin xiu 的測(cè)試報(bào)告。 小文件性能測(cè)試 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 18 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 二級(jí) 100*100 文件夾 創(chuàng)建 列表 刪除 單片 ext3 client 單進(jìn)程 real user sys real user sys real user sys 單片 ext3 client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 6chunkserver cache client 單進(jìn)程 real user sys real user sys real user sys 6chunkserver cache client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 二級(jí) 1000*1000文件夾 創(chuàng)建 列表 刪除 單片 ext3 client 單進(jìn)程 real user sys real user sys real user sys 單片 ext3 client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 6chunkserver cache client 單進(jìn)程 real user sys real user sys real user sys 6chunkserver cache client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 三級(jí)100*100*100 文件夾 創(chuàng)建 列表 刪除 單片 ext3 client 單進(jìn) 程 real user sys real user sys real user sys 單片 ext3 client 10 進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最 長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 19 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 6chunkserver cache client 單進(jìn)程 real user sys real user sys real user sys 6chunkserver cache client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 6chunkserver cache client 50 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 6chunkserver cache client 100 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user sys 6chunkserver cache remote client 10 并發(fā)進(jìn)程 最長(zhǎng)時(shí)間： real user sys 最長(zhǎng)時(shí)間： real user