cloudera大數(shù)據(jù)平臺環(huán)境搭建傻瓜式說明書-資料下載頁
2025-05-13 22:19本頁面
【正文】 . 拷貝jar包在所有節(jié)點上：//如果沒有/usr/share/java/目錄，則創(chuàng)建 cp /usr/share/java/在主節(jié)點上：//將mysql JDBC jar 包拷貝到 /opt/cp /opt/ . 修改clouderascmagent配置在主節(jié)點上，修改/opt/：// server_host=localhost 內容改為server_host= sed i s/server_host=localhost/server_host= /opt/在主節(jié)點上：// 打包，并復制到其他節(jié)點cd /opt tar czf //復制到其他節(jié)點scp node169:/opt/scp node170:/opt/scp node171:/opt/scp node172:/opt/ 在所有從節(jié)點上解壓：// 包解壓cd opt tar xzvf //解壓后刪除rm rf . 啟動CM Server和Agent在主節(jié)點上，啟動clouderascmserver： /opt/啟動過程較慢，可通過/opt/，查看啟動過程。在所有節(jié)點上，啟動clouderascmagent： /opt/. 訪問CM地址：://主節(jié)點IP:7180用戶名、密碼：admin 3. 安裝CDH. 登錄后界面接受協(xié)議：. 選擇CM版本本文檔選擇Cloudera Express免費版。. 指定主機在搜索主機名和IP地址框輸入node[169172]，這里輸入的內容支持正則表達式。輸入后點【搜索】按鈕，出現(xiàn)機器列表：選擇“當前管理的主機“選擇項卡，點【繼續(xù)】。. 選擇CDH版本這里需要選擇制作本地源時的版本，如果選擇別的版本的就會去官網下載，那樣安裝速度會很慢。 點【繼續(xù)】按鈕，進入安裝界面。. 出現(xiàn) “主機運行狀態(tài)不良”錯誤遇到節(jié)點“主機運行狀態(tài)不良”的提示，解決辦法是刪除故障節(jié)點Agent服務cm_guid文件：rm rf /opt/重新啟動故障節(jié)點Agent服務：/opt/重啟故障節(jié)點Agent服務后，故障消失：注：出現(xiàn)故障原因是，因為我之前在故障節(jié)點啟動過clouderascmagent服務。. 檢查主機正確性確保全部驗證通過。. 選擇安裝的服務本文選擇的是安裝所有服務。. 角色分配這里應該根據(jù)實際需求和服務器的硬件參數(shù)自己選擇. 數(shù)據(jù)庫設置指定的數(shù)據(jù)庫名稱，（hive,monitor,oozie,hue）保持一致，并輸入對應的數(shù)據(jù)庫用戶名和密碼，為了簡便這里用的是root賬號名和密碼。全部輸入完，之后【測試連接】：. 測試連接報錯：測試連接，Hue 測試報錯：Unable to verify database connection：原因是缺少Mysql mysqlmunitylibspat 安裝包，安裝后，問題解決：//進入安裝包所在目標 cd /data/mysql/ rpm ivh 測試成功后，點【繼續(xù)】安裝。. 群集設置可以根據(jù)自己的實際情況更改設置，本文采用默認配置。這些配置也可以在集群安裝完成后再更改。. 開始安裝安裝過程沒有任何錯誤，顯示安裝完成。. 安裝完成第一次安裝完成后，會出現(xiàn)一些配置的警告信息。這些可以根據(jù)提示信息更改。. 警告信息：發(fā)現(xiàn)節(jié)點有異常信息，顯示所有主機，發(fā)現(xiàn)node71節(jié)點運行狀態(tài)不良。按照 主機所有主機進入節(jié)點查看：選擇“配置“頁簽，拉到頁面底部，修改”主機時鐘偏差閾值“，設為”從不“，點【保存更改】，異常消失。4. 常見錯誤. 初始化數(shù)據(jù)庫錯誤：在這個環(huán)節(jié)，出現(xiàn)的問題較多，但總的來說，是與數(shù)據(jù)庫參數(shù)配置，和帳號權限配置有關。，出現(xiàn)的錯誤：: Your password does not satisfy the current policy requirements一般是由密碼策略級別問題引發(fā)：可以通過 配置文件關閉 validate_password 插件。通過修改/etc/ 目錄下配置文件，修改設置密碼策略的級別，只需要在[mysqld]下添加一行 validate_password = off如圖所示：編輯完配置文件后，重啟mysqld服務即可生效。. 未能連接到 Host Monitor后臺tail f /opt/：: Could not find a HOST_MONITORING nozzle from SCM.此問題原因：有些網上說是由文件句柄數(shù)限制引起，所以按照網上說明進行了修改：在主節(jié)點上，修改/opt/：//查看文件句柄數(shù)，顯示1024，顯然太小 ulimit n 1024//修改限制vi /etc/security/ //在文件后加入下面內容：* soft nofile 100000* hard nofile 100000此步驟需要重啟機器生效，可以設置完后再重啟。 注：按照上面過程操作，但問題依然存在， “主機運行狀態(tài)不良”故障問題解決辦法，問題得到解決。
高考資料相關推薦
鄂ICP備17016276號-1