【正文】 s ... mfsmetalogger daemon initialized properly 啟動(dòng)過程如果不能跟元數(shù)據(jù)服務(wù)器進(jìn)行通信的話，系 統(tǒng)會(huì)給出錯(cuò)誤信息。因?yàn)槊總€(gè)數(shù)據(jù)存儲(chǔ)服務(wù)器的安裝和配置都是相同的，所以只需按照一個(gè)服務(wù)器的操作就可以了。 ◆ CSSERV_LISTEN_PORT = 9422 CSSERV—chunkserver,這個(gè)監(jiān)聽端口用于與其它數(shù)據(jù)存儲(chǔ)服務(wù)器間的連接，通常是數(shù)據(jù)復(fù)制。如圖 810 所示 : 圖 810 chunkserver 與 master 的連接狀況 查看 元數(shù)據(jù)服務(wù)器 的系統(tǒng)日志，可以看見新增的數(shù)據(jù)存儲(chǔ)服務(wù)器 chunkserver 被加入。 ◆安裝 MFS 客戶端程序 修改環(huán)境變量文件 /etc/profile ,追加下面的行，然后再執(zhí)行命令 source /etc/profile 使修改生效。 [rootmysqlbk ~] df h Filesystem Size Used Avail Use% Mounted on /dev/hda1 19G 16G 15% / /dev/hda7 51G 180M 48G 1% /backup /dev/hdc1 145G 131G 5% /data /dev/hda5 19G 173M 18G 1% /home /dev/hda3 24G 217M 23G 1% /var /dev/hda2 29G 26G 6% /usr tmpfs 0 0% /dev/shm mfs:9421 256G 11% /mnt/mfs 進(jìn)入目錄 /mnt/mfs，上傳一個(gè)文件，看是否正常？接著在手動(dòng)用 touch 創(chuàng)建一個(gè)文件，然后再刪除它們，看是否可以正常操作。如圖 215 所示： 圖 215 freebsd sysinstall 菜單界面（續(xù)三 ） 選擇“ kld”后，回車執(zhí)行默認(rèn)動(dòng)作“ [OK]”，進(jìn)入下一步選軟件包。如圖 217 所示： 圖 217 freebsd 安裝 MFS 客戶端后生成的文件列表 六、使用和掛接 MFS 文件系統(tǒng) 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 16 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 創(chuàng)建掛接點(diǎn) mkdir /mnt/mfs 掛接 MFS /usr/local/mfs/bin/mfsmount /mnt/mfs –H .注意，所有的 MFS 都是掛接同一個(gè)元數(shù)據(jù)服務(wù)器 master,而不是其他數(shù)據(jù)存儲(chǔ)服務(wù)器 chunkserver ! 通過查看磁盤使用情況來檢查是否被掛接成功。再停止第 2 個(gè)chunkserver，重復(fù)執(zhí)行上述操作；然后再停止第 3 個(gè)服務(wù)器，執(zhí)行類似的文件讀些操作。 tar czvf mfs 刪除目錄 mv mfs 或 rm –rf mfs 啟動(dòng)元數(shù)據(jù)服務(wù) ../sbin/mfsmaster start 啟動(dòng)失敗，提示不能初始化數(shù)據(jù)。 注意 :如果元數(shù)據(jù)服務(wù)不是以命令 mfsmastar stop 方式停止的話 ,再次重啟會(huì)出現(xiàn)意外 ,因此需要先執(zhí)行 mfsmetarestore – a 然后再啟動(dòng) . 4 性能測(cè)試 這里不打算介紹具體的測(cè)試過程，老實(shí)說，我也沒仔細(xì)做過對(duì)比測(cè)試。mfsmetarestore a 恢復(fù)成功后再執(zhí)行啟動(dòng)新的元數(shù)據(jù)服務(wù)操作。換句換說，即使元數(shù)據(jù)服務(wù)器報(bào)廢了，也能再部署一個(gè)元數(shù)據(jù)服務(wù)器，然后從數(shù)據(jù)存儲(chǔ)服務(wù)器chunkserver 及備份服務(wù)器 mfsmetalogger 取得恢復(fù)所需要的文件。 測(cè)試數(shù)據(jù)存儲(chǔ)服務(wù)器 我用 5 個(gè)服務(wù)器組成了 MFS 的存儲(chǔ)平臺(tái)，其中一個(gè)是 master,其余四個(gè)服務(wù)器是 chunkserver。 make install 檢查 MFS 客戶端安裝的結(jié)果。如圖 213 所示： 圖 213 freebsd sysinstall 菜單界面（續(xù)一） 選擇“ Packages” ,進(jìn)入下一步。使用的命令是 modprobe fuse。 一、安裝 MFS 客戶端 /data 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 11 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ◆ Mfsmount 需要依賴 FUSE,因此需要先安裝好 fuse，這里我 選用 。因?yàn)槲业拿總€(gè)服務(wù)器只需貢獻(xiàn)一個(gè)分區(qū)做為 MFS,因此配置文件只需要如下一行內(nèi)容就可以了： 這個(gè)文件默認(rèn)情況下有好幾行，我們最好把它刪掉，因?yàn)榘闯Ｒ?guī)情況用注釋符號(hào)“ ” 好像不起作用。下面是修改了的配置文件： WORKING_USER = mfs WORKING_GROUP = mfs DATA_PATH = /usr/local/mfs/var/mfs LOCK_FILE = /var/run/mfs/ SYSLOG_IDENT = mfschunkserver BACK_LOGS = 50 MASTER_RECONNECTION_DELAY = 30 MASTER_HOST = MASTER_PORT = 9420 MASTER_TIMEOUT = 60 CSSERV_LISTEN_HOST = * CSSERV_LISTEN_PORT = 9422 CSSERV_TIMEOUT = 60 CSTOCS_TIMEOUT = 60 HDD_CONF_FILENAME = /usr/local/mfs/etc/ 這個(gè)配置文件里，沒有注釋符號(hào)“ ”就是被修改過的項(xiàng)了，接下來是里面某些項(xiàng)的含義說明： 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 10 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ◆ MASTER_HOST = 元數(shù)據(jù)服務(wù)器的名稱或地 址，可以是主機(jī)名，也可以是ip 地址，只要數(shù)據(jù)存儲(chǔ)服務(wù)器能訪問到元數(shù)據(jù)服務(wù)器就行。 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 9 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 數(shù)據(jù)存儲(chǔ) chunkserver 服務(wù)器的安裝配置 數(shù)據(jù)存儲(chǔ)服務(wù)器 chunkserver 也是可以運(yùn)行在各種類 unix 平臺(tái)的，因此不再多說。當(dāng)元數(shù)據(jù)服務(wù)器關(guān)閉或者出故障時(shí)， 文件將消失，那么要恢復(fù)整個(gè) mfs,則需從 metalogger 服務(wù)器取得該文件。 安裝元數(shù)據(jù)日志服務(wù)器 metalogger 下載 GNU 源碼 wget 解包 tar zxvf 切換目錄 cd 創(chuàng)建用戶 useradd mfs –s /sbin/nologin 配置 ./configure prefix=/usr/local/mfs withdefaultuser=mfs withdefaultgroup=mfs 編譯安裝 make 。注意，這個(gè)日志跟元數(shù)據(jù)變化 日志不是一回事情。還有幾個(gè)與 時(shí)間有關(guān)的數(shù)值，其單位是秒。 前者為主配置文件，后者為權(quán)限控制文件（ mfs客戶端掛接時(shí)使用）。 整個(gè)寫入過程如圖 14 所示（圖 片來源于官方網(wǎng)站 ）： 圖 14 MFS 數(shù)據(jù)寫入過程 與讀取數(shù)據(jù)一樣， MFS 寫入數(shù)據(jù)過程中，數(shù)據(jù)的傳輸任然不需要經(jīng)過元數(shù)據(jù)服務(wù)器。 元數(shù)據(jù)服務(wù)器與 chunk server 進(jìn)行如下交互（這個(gè)過程是可選項(xiàng)目，只有當(dāng)所需的 chunks【注1】 不存在時(shí)才進(jìn) 行這個(gè)交互）： ① 元數(shù)據(jù)庫(kù)服務(wù)器指示在某些 chunk 服務(wù)器創(chuàng)建分塊 chunks. ② Chunk 服務(wù)器告知元數(shù)據(jù)服務(wù)器，第①步的操作成功。 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 3 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ MFS 讀寫處理過程 MFS 讀取數(shù)據(jù)分以下 4 個(gè)步驟： 客戶端向元數(shù)據(jù)服務(wù)器 發(fā)請(qǐng)求。 ★ 為文件創(chuàng)建快照 MFS 文件系統(tǒng)的組成 MFS 分布式文件系統(tǒng) 由元數(shù)據(jù)服務(wù)器、元數(shù)據(jù)日志服務(wù)器（也稱備份服務(wù)器）、數(shù)據(jù)存儲(chǔ)服務(wù)器、客戶端（用戶主機(jī)）等幾部分組成： 不停服務(wù)擴(kuò)容。 然而優(yōu)化并不能對(duì)應(yīng)對(duì)日益 增多的客戶端的性能要求，因此唯一的選擇只能是采取別的解 決方案了。 畢業(yè)設(shè)計(jì)（論文）報(bào)告紙 共 11 頁(yè) 第 1 頁(yè) ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 裝 ┊ ┊ ┊ ┊ ┊ 訂 ┊ ┊ ┊ ┊ ┊ 線 ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ ┊ 1 分布式文件 系統(tǒng) moosefs 由于用戶數(shù)量的不斷攀升 ,我對(duì)訪問量大的應(yīng)用實(shí)現(xiàn)了可擴(kuò)展、高可靠的集群部署（即lvs+keepalived 的方式），但仍然有用戶反饋訪問慢的問題。 電氣級(jí)硬件故障 ............................................................................... 錯(cuò)誤 !未定義書簽。 賦值故障分析和模擬 ............................................................ 錯(cuò)誤 !未定義書簽。 3 軟 件模擬方案生成 ..................................................................................... 錯(cuò)誤 !未定義書簽。 故障注入 ........................................................................................... 錯(cuò)誤 !未定義書簽。以每天發(fā)布 50 部視頻，每部視頻 1G 為例，要求中央存儲(chǔ)寫性能 20MB/s，以視頻網(wǎng)站流媒體節(jié)點(diǎn) 6 的為例，同時(shí)讀的性能要 120MB/s。視頻文件中央存儲(chǔ)是視頻網(wǎng)站的視