【正文】 云計(jì)算實(shí)驗(yàn)報(bào)告 2（共五篇） 第一篇：云計(jì)算實(shí)驗(yàn)報(bào)告 2 太 原 科 技 大 學(xué)實(shí)驗(yàn)報(bào)告 2020年 10 月 14 日 實(shí)驗(yàn)時(shí)間： 16時(shí) 00分至 18 時(shí) 00 分 專業(yè) 姓名 學(xué)號 班級 課程名稱 實(shí)驗(yàn)名稱 Hadoop平臺安裝實(shí)驗(yàn) 2 同組者 指導(dǎo)教師 成績 一、實(shí)驗(yàn)?zāi)繕?biāo)： 在大數(shù)據(jù)時(shí)代，存在很多開源的分布式數(shù)據(jù)采集、計(jì)算、存儲技術(shù)，本實(shí)驗(yàn)將熟悉并搭建幾種常用的大數(shù)據(jù)采集、處理分析技術(shù)環(huán)境。 實(shí)驗(yàn)二需要在筆記本上搭建 Hadoop 集群，實(shí)驗(yàn)報(bào)告根據(jù)教程對筆記本上創(chuàng)建虛擬機(jī)搭建 Hadoop 集群的步驟進(jìn)行了說明。包含所有需要安裝的軟件與服務(wù)的版本，安裝路徑，安裝方法等。 二、實(shí)驗(yàn)原理： ： Hadoop默認(rèn)模式、即非分布式模式 (本地模式 )、無需進(jìn)行其他配置即可運(yùn)行非分布式，即 java 單進(jìn)程，方便進(jìn)行調(diào)試。 ： Hadoop 在單節(jié)點(diǎn)上以偽分布式的方式運(yùn)行， Hadoop 進(jìn)程以分離的java 進(jìn)程來運(yùn)行，節(jié)點(diǎn)既作為 NameNode 也作為 DataNode，同時(shí)，讀取的是 HDFS中的文件。 ：使用多個(gè)節(jié)點(diǎn)構(gòu)成集群環(huán)境來運(yùn)行 Hadoop。 三、實(shí)驗(yàn)內(nèi)容： 以偽分布式模式安裝 Hadoop平臺四、實(shí)驗(yàn)設(shè)備： 個(gè)人筆記本電腦虛擬街軟件： VMwareWorkstation 系統(tǒng) contos7鏡像站 點(diǎn)： 驗(yàn)步驟：： ，拷貝到 CentOS中的 ~/software 目錄下 將 Hadoop壓縮包，解壓縮到用戶主目錄的 dt 目錄下； $cd~ $mkdirdt $cddt $tarzxvf~/software/ 打開 /etc/profile 配置文件，配置 hadoop環(huán)境變量 : exportHADOOP_HOME=/home/hduser/dt/ exportPATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH 保存。然后執(zhí)行 /etc/profile 文件 (讓配置生效 )： $source/etc/profile Hadoop:1 、 配 置$HADOOP_HOME/etc/hadoop/目錄中如下的配置文件： 1)： exportJAVA_HOME=/usr/local/ 2) 注：如果沒有 hddata/tmp目錄，要先在磁盤上創(chuàng)建。 /home/hduser/dt/hddata/tmp 3) 注：如果沒有 hddata/name 目錄和 hddata/data 目錄，要先在磁盤上創(chuàng)建。 /home/hduser/dt/hddata/name /home/hduser/dt/hddata/data 1 4) 注：默認(rèn)沒有這個(gè)文件，從 復(fù)制一份并改名。 $ 配置內(nèi)容如下： yarn localhost:10020 localhost:19888 5) mapreduce_shuffle localhost 格式化 hdfs(僅需執(zhí)行格式化一次 )。在終端窗口，執(zhí)行命令 : $hdfsnamenodeformat SSH服務(wù)，實(shí)現(xiàn)集群中 SSH 無密碼連接 (從主節(jié)點(diǎn)到從節(jié)點(diǎn)的無密碼登錄 )： 在終端下，執(zhí)行如下的 命令： (注 :CentOS 已自帶 SSH 服務(wù)，略過此步 ) $sudoyumyinstallssh sudoaptgetinstallssh $lsa 本地 SSH登錄： $sshlocalhost $exit 查看 .ssh目錄： $lsa 進(jìn)入 .ssh目錄： $ 生成公私鑰： $sshkeygentrsa 然后一路回車 將公鑰加入到授權(quán)文件： $sshcopyidhduser@localhost 測試 SSH無密碼登錄： $sshlocalhost $exit pi程序： $hadoopjar./share/hadoop/mapreduce/hadoopmapreduceexamples 六、實(shí)驗(yàn)結(jié)果： 這次實(shí)驗(yàn)完成了 Hadoop 的安裝和環(huán)境變量的配置，使得程序可以運(yùn)行，為下一次的實(shí)驗(yàn)奠定一定的基礎(chǔ)， HDFS實(shí)驗(yàn)會(huì)進(jìn)行的比較順利。 七：心得體會(huì) 通過本次實(shí)驗(yàn)的實(shí)踐，已經(jīng)完成了 Hadoop的安裝和環(huán)境變量的配置，我一直覺得環(huán)境變量比較難配置，但這次發(fā)現(xiàn)用代碼的配置也許會(huì)有新的感覺，也會(huì)變得容易一些，書本學(xué)習(xí)的是理論知識，我們通過實(shí)驗(yàn)可以把書本上的知識變成自己的。 第二篇：云計(jì)算實(shí)驗(yàn)報(bào)告 2 太 原 科 技 大 學(xué)實(shí)驗(yàn)報(bào)告 2020年 10 月 14 日 實(shí)驗(yàn)時(shí)間： 16時(shí) 00分至 18 時(shí) 00 分 專業(yè) 姓名 學(xué)號 班級 課程名稱 實(shí)驗(yàn)名稱 Hadoop平臺安裝實(shí)驗(yàn) 2 同組者 指導(dǎo)教師 成績 一、實(shí)驗(yàn)?zāi)繕?biāo)： 在大數(shù)據(jù)時(shí)代，存在很多開源的分布式數(shù)據(jù)采集、計(jì)算、存儲技術(shù)，本實(shí)驗(yàn)將熟悉并搭建幾種常用的大數(shù)據(jù)采集、處理分析技術(shù)環(huán)境。 實(shí)驗(yàn)二需要在筆記本上搭建 Hadoop 集群，實(shí)驗(yàn)報(bào)告根據(jù)教程對筆記本上創(chuàng)建虛擬機(jī)搭建 Hadoop 集群的步驟進(jìn)行了說明。包含所有需要安裝的軟件與服務(wù)的版本，安裝路徑，安裝方法等。 二、實(shí)驗(yàn)原理： ： Hadoop默認(rèn)模式、即非分布式模式 (本地模式 )、無需進(jìn)行其他配置即可運(yùn)行非分布式，即 java 單進(jìn)程，方便進(jìn)行調(diào)試。 ： Hadoop 在單節(jié)點(diǎn)上以偽分布式的方式運(yùn)行， Hadoop 進(jìn)程以分離的java 進(jìn)程來運(yùn)行，節(jié)點(diǎn)既作為 NameNode 也作為 DataNode，同時(shí)，讀取的是 HDFS中的文件。 ：使用多個(gè)節(jié)點(diǎn)構(gòu)成集群環(huán)境來運(yùn)行 Hadoop。 三、實(shí)驗(yàn)內(nèi)容： 以偽分布式模式安裝 Hadoop平臺四、實(shí)驗(yàn)設(shè)備： 個(gè)人 筆記本電腦虛擬街軟件： VMwareWorkstation 系統(tǒng) contos7鏡像站點(diǎn)： 驗(yàn)步驟：： ，拷貝到 CentOS中的 ~/software 目錄下 將 Hadoop壓縮包，解壓縮到用戶主目錄的 dt 目錄下； $cd~ $mkdirdt $cddt $tarzxvf~/software/ 打開 /etc/profile 配置文件，配置 hadoop環(huán)境變量 : exportHADOOP_HOME=/home/hduser/dt/ exportPATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH 保存。然后執(zhí)行 /etc/profile 文件 (