【文章內(nèi)容簡介】 xvf 解壓安裝包mv hadoop 將文件夾重命名hadoopchown–Rhadoop:hadoop hadoop 將文件夾hadoop讀權(quán)限分配給hadoop用戶rm –rf 刪除安裝包　　解壓后，并重命名?！　“?usr/hadoop讀權(quán)限分配給hadoop用戶（非常重要）　　刪除安裝包　　最后在/usr/hadoop下面創(chuàng)建tmp文件夾，把Hadoop的安裝路徑添加到/etc/profile中，修改/etc/profile文件（配置java環(huán)境變量的文件），將以下語句添加到末尾，并使其有效： set hadoop pathexport HADOOP_HOME=/usr/hadoopexport PATH=$PATH :$HADOOP_HOME/bin1）在/usr/hadoop創(chuàng)建tmp文件夾mkdir /usr/hadoop/tmp2）配置/etc/profilevim /etc/profile　　配置后的文件如下：3）重啟/etc/profilesource /etc/profile 配置hadoop　　1）　　該文件位于/usr/hadoop/conf目錄下?！　≡谖募哪┪蔡砑酉旅鎯?nèi)容。 set java environmentexport JAVA_HOME=/usr/java/　　Hadoop配置文件在conf目錄下。由于Hadoop發(fā)展迅速，代碼量急劇增加，代碼開發(fā)分為了core，hdfs和map/reduce三部分，、。；?！　?）　　，這里配置的是HDFS的地址和端口號。configuration property name/name value/usr/hadoop/tmp/value （備注：請先在 /usr/hadoop 目錄下建立 tmp 文件夾） descriptionA base for other temporary directories./description /property! file system properties property name/name valuehdfs://:9000/value /property/configuration　　備注：，此時系統(tǒng)默認(rèn)的臨時目錄為：/tmp/hadoohadoop。而這個目錄在每次重啟后都會被干掉，必須重新執(zhí)行format才行，否則會出錯。 用下面命令進行編輯： 編輯結(jié)果顯示如下：　　3）　　修改Hadoop中HDFS的配置，配置的備份方式默認(rèn)為3。configuration property name/name value1/value (備注：replication 是數(shù)據(jù)副本數(shù)量，默認(rèn)為3，salve少于3臺就會報錯) /propertyconfiguration　　用下面命令進行編輯：　　編輯結(jié)果顯示如下：　　4）　　修改Hadoop中MapReduce的配置文件，配置的是JobTracker的地址和端口。configuration property name/name value:9001/value /property/configuration　　用下面命令進行編輯：　　編輯結(jié)果顯示如下：　　5）配置masters文件　　有兩種方案： （1）第一種 （2）第二種 去掉localhost，加入Master機器的IP：　　為保險起見，啟用第二種，因為萬一忘記配置/etc/hosts局域網(wǎng)的DNS失效，這樣就會出現(xiàn)意想不到的錯誤，但是一旦IP配對，網(wǎng)絡(luò)暢通，就能通過IP找到相應(yīng)主機。　　用下面命令進行修改：　　編輯結(jié)果顯示如下：6）配置slaves文件（Master主機特有） 有兩種方案： （1）第一種去掉localhost，每行只添加一個主機名，把剩余的Slave主機名都填上。 例如：添加形式如下 （2）第二種 去掉localhost，加入集群中所有Slave機器的IP，也是每行一個。 例如：添加形式如下　　原因和添加masters文件一樣，選擇第二種方式?！　∮孟旅婷钸M行修改：　　編輯結(jié)果如下：　　現(xiàn)在在Master機器上的Hadoop配置就結(jié)束了，剩下的就是配置Slave機器上的Hadoop?！　∫环N方式是按照上面的步驟，把Hadoop的安裝包在用普通用戶hadoop通過scp復(fù)制到其他機器的/home/hadoop目錄下，然后根據(jù)實際情況進行安裝配置，除了第6步，那是Master特有的。用下面命令格式進行。（備注：此時切換到普通用戶hadoop）scp ~/ hadoop@服務(wù)器IP:~/ 例如：從到復(fù)制Hadoop的安裝包。另一種方式是將 Master上配置好的hadoop所在文件夾/usr/hadoop復(fù)制到所有的Slave的/usr目錄下（實際上Slave機器上的slavers文件是不必要的， 復(fù)制了也沒問題）。用下面命令格式進行。（備注：此時用戶可以為hadoop也可以為root）scpr/usr/hadooproot@服務(wù)器IP:/usr/ 例如：從到復(fù)制配置Hadoop的文件。 上圖中以root用戶進行復(fù)制，當(dāng)然不管是用戶root還是hadoop，雖然Master機器上的/usr/hadoop文件夾用戶hadoop有權(quán)限，但是Slave1上的hadoop用戶卻沒有/usr權(quán)限，所以沒有創(chuàng)建文件夾的權(quán)限。所以無論是哪個用戶進行拷貝，右面都是root@機器IP格式。因為我們只是建立起了hadoop用戶的SSH無密碼連接，所以用root進行scp時，扔提示讓你輸入服務(wù)器用戶root的密碼。 查看服務(wù)器的/usr目錄下是否已經(jīng)存在hadoop文件夾，確認(rèn)已經(jīng)復(fù)制成功。查看結(jié)果如下：　　從上圖中知道，hadoop文件夾確實已經(jīng)復(fù)制了，但是我們發(fā)現(xiàn)hadoop權(quán)限是root，所以我們現(xiàn)在要給服務(wù)器上的用戶hadoop添加對/usr/hadoop讀權(quán)限。　　以root用戶登錄，執(zhí)行下面命令。chownRhadoop:hadoop（用戶名：用戶組） hadoop（文件夾）　　接著在Slave1 .Hadoop上修改/etc/profile文件（配置 java 環(huán)境變量的文件），將以下語句添加到末尾，并使其有效（source /etc/profile）： set hadoop environmentexport HADOOP_HOME=/usr/hadoopexport PATH=$PATH :$HADOOP_HOME/bin　　如果不知道怎么設(shè)置，可以查看前面機器的/etc/profile文件的配置，到此為此在一臺Slave機器上的Hadoop配置就結(jié)束了。剩下的事兒就是照葫蘆畫瓢把剩余的幾臺Slave機器按照《從到復(fù)制Hadoop的安裝包?！愤@個例子進行部署Hadoop。 啟動及驗證　　1）格式化HDFS文件系統(tǒng)　　在上使用普通用戶hadoop進行操作。（備注：只需一次，下次啟動不再需要格式化，只需 ）hadoop namenode format　　某些書上和網(wǎng)上的某些資料中用下面命令執(zhí)行?！　∥覀冊诳春枚辔臋n包括有些書上，按照他們的hadoop環(huán)境變量進行配置后，并立即使其生效，但是執(zhí)行發(fā)現(xiàn)沒有找見bin/hadoop這個命令?！　∑鋵嵨覀儠l(fā)現(xiàn)我們的環(huán)境變量配置的是$HADOOP_HOME/bin，我們已經(jīng)把bin包含進入了，所以執(zhí)行時，加上bin反而找不到該命令，除非我們的hadoop壞境變量如下設(shè)置。 set hadoop pathexport HADOOP_HOME=/usr/hadoopexport PATH=$PATH :$HADOOP_HOME:$HADOOP_HOME/bin　　這樣就能直接使用bin/hadoop也可以直接使用hadoop，現(xiàn)在不管哪種情況，hadoop命令都能找見了。我們也沒有必要重新在設(shè)置hadoop環(huán)境變量了，只需要記住執(zhí)行Hadoop命令時不需要在前面加bin就可以了?！　纳蠄D中知道我們已經(jīng)成功格式話了，但是美中不足就是出現(xiàn)了一個警告，從網(wǎng)上的得知這個警告并不影響hadoop執(zhí)行，但是也有辦法解決，詳情看后面的常見問題FAQ。　　2）啟動hadoop　　在啟動前關(guān)閉集群中所有機器的防火墻，不然會