hadoop常見筆試題答案-全文預(yù)覽
【正文】 taNode管理存儲的數(shù)據(jù)5. (3分)三個datanode中當(dāng)有一個datanode出現(xiàn)錯誤時(shí)會怎樣？答：當(dāng)有一個datanode出現(xiàn)錯誤的時(shí)候，namenode會將那個datanode上的數(shù)據(jù)拷貝到其他的節(jié)點(diǎn)去進(jìn)行存儲。Datanode：存儲數(shù)據(jù)ResourceManager：ResourceManager負(fù)責(zé)集群中所有資源的統(tǒng)一管理和分配，它接收來自各個節(jié)點(diǎn)（NodeManager）的資源匯報(bào)信息，并把這些信息按照一定的策略分配給各個應(yīng)用程序（實(shí)際上是ApplicationManager）NodeManager：是YARN中每個節(jié)點(diǎn)上的代理，它管理Hadoop集群中單個計(jì)算節(jié)點(diǎn) (3分)請寫出以下的shell命令 （1）殺死一個job（2）刪除hdfs上的 /tmp/aaa目錄（3）加入一個新的存儲節(jié)點(diǎn)和刪除一個節(jié)點(diǎn)需要執(zhí)行的命令答：（1）mapred job list得到j(luò)ob的id，然后執(zhí)行mapred job –kill jobId就可以殺死一個指定jobId的job工作了。 secondarynamenode：它是namenode的一個快照，會根據(jù)configuration中設(shè)置的值來43. (每空2分)hadoop使用自己的序列化格式為： Writable 。39. (每空2分)map任務(wù)將其輸出寫入到 本地磁盤 。35. (每空1分)通過 Zookeeper 管理兩個或者多個NameNode，使一個NameNode為 active 狀態(tài)，并且同步每個NN的元數(shù)據(jù)，如果 active 狀態(tài)的NN宕機(jī)后馬上啟用狀態(tài)為 standby 狀態(tài)的備用節(jié)點(diǎn)。31. (每空2分)一個NodeManager能夠同時(shí)運(yùn)行最大reduce任務(wù)數(shù)（默認(rèn)）： 2 。sort224。29. (每空1分)hadoop集群默認(rèn)機(jī)架感知是啟用的。25. (每空1分)修改blocksize大小的屬性是： ，在 配置文件里。21. (每空1分)hadoop包含的四大模塊分別是： Hadoop mon 、 HDFS 、 Mapreduce 、 yarn 。17. (每空1分)啟動yarn的shell腳本為： 。備份 datanode 被升級為首選 datanode ，并在其余2個 datanode 中備份復(fù)制數(shù)據(jù)。 13. (每空2分)當(dāng)客戶端的讀取操作發(fā)生錯誤的時(shí)候，客戶端會向 namenode 報(bào)告錯誤，并請求 namenode 排除錯誤的 datanode 后，重新根據(jù)距離排序，從而獲得一個新的 的讀取路徑。文件被分成若干個相同大小的數(shù)據(jù)塊，分別存儲在若干個 datanode 上， datanode 會定期向集群內(nèi) namenode 發(fā)送自己的運(yùn)行狀態(tài)與存儲內(nèi)容，并根據(jù) namnode 發(fā)送的指令進(jìn)行工作。7. (每空2分)一個HDFS集群包括兩大部分，即 namenode 與 datanode 。3. (每空1分) ResourceManager 程序通常與 NameNode 在一個節(jié)點(diǎn)啟動。2. (每空1分)HDFS中的block默認(rèn)保存 3 份。6. (每空2分)HDFS將要存儲的大文件進(jìn)行 分割 ， 分割 后存放在既定的存儲塊 中，并通過預(yù)先設(shè)定的優(yōu)化處理，模式對存儲的數(shù)據(jù)進(jìn)行預(yù)處理，從而解決了大文
規(guī)章制度相關(guān)推薦
鄂ICP備17016276號-1