【正文】 scores39。scores39。course:39。studentid39。scores39。course:39。scores39。John39。scores39。scores39。9039。course:history39。Adam39。scores39。7539。course:math39。Adam39。scores39。239。studentid:39。Adam39。scores39。8539。course:history39。John39。scores39。8039。course:math39。John39。scores39。139。studentid:39。John39。scores39。true39。scores39。course39。studentid39。scores39。helpRETURN39。 name student ID course : math course : history John 1 80 85 Adam 2 75 90 ? 首先執(zhí)行 bin/hbase hsell進(jìn)入 HBase控制臺(tái) ： /hbase bin/hbase shell HBase Shell。 ? bin/hadoop jar [MapReduce Job jar檔路徑 ] [Job主類別 ] [Job參數(shù) ] ? Hadoop內(nèi)建的 使用過的 grep功能外，還有許多其它功能如 wordcount、pi等等可測(cè)試，可用下列指令查詢： /hadoop bin/hadoop jar 54 Hadoop基本操作 (4/7) ? Hadoop目錄內(nèi)的其它 jar檔分別有其它功能 。helpRETURN39。若可正常執(zhí)行，則表示 HBsae安裝完成： /hbase bin/hbase shell HBase Shell。config[az.]+39。 ? 最 上面顯示整個(gè) HDFS的資訊，接著為每個(gè)資料節(jié)點(diǎn)的個(gè)別資訊： /hadoop bin/hadoop dfsadmin report Configured Capacity: 9231007744 ( GB) ... ... Blocks with corrupt replicas: 0 Missing blocks: 0 Datanodes available: 1 (1 total, 0 dead) ... ... DFS Remaining%: % Last contact: Mon May 16 22:15:03 CST 2022 39 FullyDistributed Mode(14/14) ? 接著可測(cè)試一下 grep範(fàn)例。chrisdo39。 ? 複製 Host01的 Hadoop目錄到 Host02之步驟如下： ~ scp r /opt/hadoop Host02:/opt/ ? 啟動(dòng) Hadoop：與單機(jī)安裝相同，先進(jìn)行 HDFS格式化步驟： /hadoop bin/hadoop namenode format 36 FullyDistributed Mode(11/14) ? 接著可看到下列訊息： 11/05/16 21:52:13 INFO : STARTUP_MSG: /************************************************************ STARTUP_MSG: Starting NameNode STARTUP_MSG: host = Host01/ STARTUP_MSG: args = [format] STARTUP_MSG: version = STARTUP_MSG: build = r 911707。先使用 Hadoop運(yùn)行，再將Hadoop及 .ssh目錄刪除： /hadoop /opt/hadoop/bin/ ~ rm rf /opt/hadoop ~ rm rf ~/.ssh ~ rm rf /tmp/* ? 下載 Hadoop到 Host01安裝：與單機(jī)安裝步驟相同，以下步驟都在 Host01上操作 。 26 FullyDistributed Mode(1/14) ? 在安裝 Hadoop叢集之前，需先架設(shè)叢集系統(tǒng)，其架設(shè)方法於本節(jié)不再贅述 。 /hadoop bin/hadoop fs put conf input /hadoop bin/hadoop jar grep input output 39。接下來使用下列指令完成登入免密碼： ~ sshkeygen t rsa f ~/.ssh/id_rsa P ~ cp ~/.ssh/ ~/.ssh/authorized_keys ? 完成後再登入本地機(jī)器確認(rèn)是否還須要密碼，便可發(fā)現(xiàn)不需輸入密碼即可登入，登入後輸入 exit即可登出： ~ ssh localhost Last login: Mon May 16 10:04:39 2022 from localhost ~ exit 23 PseudoDistributed Mode(7/9) ? 啟動(dòng) Hadoop：經(jīng)過上述步驟後， Hadoop的環(huán)境設(shè)定就大致完成，接著輸入 bin/hadoop namenode format進(jìn)行HDFS格式化步驟： /hadoop bin/hadoop namenode format 11/05/16 10:20:27 INFO : STARTUP_MSG: /************************************************************ STARTUP_MSG: Starting NameNode ... ... ... 11/05/16 10:20:28 INFO : SHUTDOWN_MSG: /************************************************************ SHUTDOWN_MSG: Shutting down NameNode at localhost/ ************************************************************/ 24 PseudoDistributed Mode(8/9) ? 接著只需輸入 bin/、第二組名稱節(jié)點(diǎn)、資料節(jié)點(diǎn)、 Jobtracker及 Tasktracker： /hadoop bin/ starting namenode, logging to /opt/hadoop/bin/../logs/ localhost: starting datanode, logging to /opt/hadoop/bin/../logs/hadooprootdatanode localhost: starting secondarynamenode, logging to /opt/hadoop/bin/../logs/hadooproot starting jobtracker, logging to /opt/hadoop/bin/../logs/ localhost: starting tasktracker, logging to /opt/hadoop/bin/../logs/hadooproottasktracker 25 PseudoDistributed Mode(9/9) ? 測(cè)試範(fàn)例 ： ? 同樣 的，執(zhí)行 grep這個(gè)範(fàn)例測(cè)試運(yùn)行狀態(tài) 。 (RSA) to the list of known hosts. rootlocalhost39。t be established. RSA key fingerprint is your RSA key fingerprint Are you sure you want to continue connecting (yes/no)? yes ←輸入 yes Warning: Permanently added 39。localhost ()39。 ? 首先 修改 ： /hadoop vi conf/ 18 PseudoDistributed Mode(2/9) ? 在 configuration與 /configuration之間插入 ?xml version=? ?xmlstylesheet type=text/xsl href=? ! Put sitespecific property overrides in this file. configuration property name/name value /property /configuration 19 PseudoDistributed Mode(3/9) ? 接著修改 ： /hadoop vi conf/ ? 在 configuration與 /configuration之間插入 ?xml version=? ?xmlstylesheet type=text/xsl href=? ! Put sitespecific property overrides in this file. configuration property name/name value1/value /property /configuration 20 PseudoDistributed Mode(4/9) ? 最後修改 ： /hadoop vi conf/ ? 在 configuration與/configuration之間插入 ?xml version=? ?xmlstylesheet type=text/xsl href=? ! Put sitespecific property overrides in this file. conf