hadoop常見(jiàn)筆試題答案-在線瀏覽
2024-09-17 10:44本頁(yè)面
【正文】 amenode報(bào)告錯(cuò)誤信息，并直接向提供備份的 datanode 中寫入數(shù)據(jù)。NameNode對(duì)錯(cuò)誤的DataNode進(jìn)行標(biāo)記以便后續(xù)對(duì)其進(jìn)行處理。 16. (每空1分)啟動(dòng)hdfs的shell腳本為： 。18. (每空1分)停止hdfs的shell腳本為： 。20. (每空1分)hadoop顯示根目錄命令為： hadoop fs –lsr 。22. (每空1分)namenode默認(rèn)的WebUI訪問(wèn)端口號(hào)為： 50070 。24. (每空1分)historyServer默認(rèn)的WebUI訪問(wèn)端口號(hào)為： 19888 。26. (每空1分)HDFS中namenode的RPC端口號(hào)為： 8021 ，其作用是： 接收Client連接的RPC端口，用于獲取文件系統(tǒng)metadata信息 。28. (每空1分)默認(rèn)NameNode周期性從DataNode接收心跳信號(hào)的時(shí)間間隔為： 3s 。是否正確： 錯(cuò)誤 。 Partition224。bine224。reduce函數(shù)。32. (每空2分)默認(rèn)情況下，一個(gè)同時(shí)運(yùn)行了namenode，secondarynamenode和ResourceManager的主節(jié)點(diǎn)，所使用的內(nèi)存容量為 3000 M。34. (每空1分)HA產(chǎn)生的背景是： 為了解決單NN可能出現(xiàn)宕機(jī)導(dǎo)致集群不可用或數(shù)據(jù)丟失的問(wèn)題 。36. (每空1分) job 是客戶端需要執(zhí)行的一個(gè)工作單元。38. (每空2分)biner是通過(guò) Reducer 類來(lái)定義的。40. (每空2分)reduce的輸出通常存儲(chǔ)在 HDFS 中以實(shí)現(xiàn)可靠存儲(chǔ)。42. (每空2分)序列化用于分布式數(shù)據(jù)處理的兩大領(lǐng)域?yàn)椋? 進(jìn)程間通信 和 永久存儲(chǔ) 。二．簡(jiǎn)答題，3分（17題），5分（5題）共75分1. (3分)簡(jiǎn)要描述如何安裝配置apache的一個(gè)開(kāi)源hadoop，只描述即可，無(wú)需列出具體步驟，列出具體步驟更好。答：namenode：管理集群，存儲(chǔ)數(shù)據(jù)的原信息，并管理記錄datanode中的文件信息。決定多少時(shí)間周期性的去cp一下namenode，記錄namenode中的metadata及其它數(shù)據(jù)。（2）hadoop fs rmr /tmp/aaa或者h(yuǎn)dfs dfs –rmr /tmp/aaa（3）增加一個(gè)新的節(jié)點(diǎn)在新的節(jié)點(diǎn)上執(zhí)行 start datanode 然后在主節(jié)點(diǎn)中執(zhí)行 hdfs dfsadmin refreshNodes 刪除一個(gè)節(jié)點(diǎn)的時(shí)候，只需要在主節(jié)點(diǎn)執(zhí)行 hdfs dfsadmin –refreshnodes3. (3分)請(qǐng)簡(jiǎn)述mapreduce中的bine和partition的作用答：biner是發(fā)生在map的最后一個(gè)階段，其原理也是一個(gè)小型的reducer，主要作用是減少輸出到reduce的個(gè)數(shù)，減少reducer的輸入，提高reducer的執(zhí)行效率。4. (3分)hdfs的體系結(jié)構(gòu)答：HDFS采用了主從（Master/Slave）結(jié)構(gòu)模型，一個(gè)HDFS集群是由一個(gè)NameNode和若干個(gè)DataNode組成的。6. (3分)文件大小默認(rèn)為 64M，改為 128M 有什么影響？答：更改文件的block塊大小，需要
規(guī)章制度相關(guān)推薦
鄂ICP備17016276號(hào)-1