hadoop-資料下載頁
2025-07-15 22:51本頁面
【正文】 GET_STATS_UNDER_REPLICATED_IDX = 3。 ? public int GET_STATS_CORRUPT_BLOCKS_IDX = 4。 ? public int GET_STATS_MISSING_BLOCKS_IDX = 5。 ? 安全模式開關(guān)操作 ? public boolean setSafeMode( action) HDFS API ClientProtocol（系統(tǒng)管理相關(guān)接口） ? 保存 FsImage映像，同時將更新同步到 EditLog中，要求具有超級權(quán)限，并且在安全模式下進行。 public void saveNamespace() ? 持久化文件系統(tǒng)元數(shù)據(jù)，將 Namenode結(jié)點上的數(shù)據(jù)結(jié)構(gòu)寫入到指定的文件中，如果指定文件已經(jīng)存在，則追加到該文件中 metaSave(String filename) Hadoop集群搭建 一、實驗環(huán)境 三臺 PC機， Linux操作系統(tǒng) 各主機對應(yīng)的 ip地址： ubuntu1 ubuntu2 ubuntu3 Hadoop安裝包（ 安裝 jdk 在所有的機器上建立相同的用戶，例如： grid。 SSH配置，實現(xiàn)在機器之間執(zhí)行指令的時候不需要輸入密碼。 在 ubuntu1（準備設(shè)為 namenode）上生成密鑰對，執(zhí)行 $sshkeygen t rsa，然后一路回車，就會按照默認的選項將生成的密鑰對保存在 .ssh/id_rsa文件中。執(zhí)行： $cd ~/.ssh $cp authorized_keys $scp authorized_keys ubuntu2:/home/grid/.ssh $scp authorized_keys ubuntu3:/home/grid/.ssh 二、 Hadoop安裝 在 ubuntu1上配置 Hadoop。 編輯 conf/ 解壓縮，執(zhí)行： $ tar –zxvf ../ 編輯 conf/master，修改為 master的主機名 (每個主機名一行 ) ubuntu1 編輯 conf/slaves，加入所有 slaves的主機名 ubuntu2 ubuntu3 編輯所有機器的 conf/，將 JAVA_HOME變量設(shè)置為各自 JDK安裝的根目錄，不同機器可以使用不同的 JAVA版本。 其它機器上的配置 把 Hadoop安裝文件復(fù)制到其他機器上 $ scp –r ubuntu2:/home/grid $ scp –r ubuntu3:/home/grid 三、 Hadoop運行 格式化分布式文件系統(tǒng) 啟動 Hadoop守護進程 停止 Hadoop守護進程 HDFS實驗：觀察數(shù)據(jù)塊在 Datanode上的分布 三個 Datanode 文件副本個數(shù)為 2 文件 關(guān)掉一個 Datanode時數(shù)據(jù)塊分布情況，此時文件仍然可用 關(guān)掉兩個 Datanode時數(shù)據(jù)塊的分布情況，此時文件不可用 重新啟動另外兩個 Datanode時數(shù)據(jù)塊分布情況
研究報告相關(guān)推薦
鄂ICP備17016276號-1