cloudera大數(shù)據(jù)平臺(tái)環(huán)境搭建cdh傻瓜式說(shuō)明書(shū)-文庫(kù)吧
2025-04-28 18:21 本頁(yè)面
【正文】 richrule=rule family=39。ipv439。 source address=39。39。 port protocol=39。tcp39。 port=39。06553539。 accept //設(shè)置可以訪問(wèn)的端口firewallcmd permanent addport=065535/tcpfirewallcmd reload注意： 需要在所有的節(jié)點(diǎn)上執(zhí)行，因?yàn)樯婕暗降亩丝谔嗔?，臨時(shí)開(kāi)放所有端口是為了安裝起來(lái)方便，安裝完畢后可以根據(jù)需要設(shè)置防火墻策略，保證集群安全。. 配置免密碼登錄SSH將子節(jié)點(diǎn)設(shè)置為從主節(jié)點(diǎn)ssh無(wú)密碼登陸（主節(jié)點(diǎn)訪問(wèn)從節(jié)點(diǎn)需要無(wú)密碼互通，否則后面會(huì)出現(xiàn)問(wèn)題）在主節(jié)點(diǎn)上執(zhí)行：cd~ //進(jìn)入到 根目錄 sshkeygen t rsa 一路回車，生成無(wú)密碼的密鑰對(duì)。把公鑰拷貝至node169服務(wù)器上： scp /root/.ssh/ root@node169:~ //輸入node169機(jī)器上root用戶密碼拷備成功登錄到node169服務(wù)器上：然后在node169服務(wù)器上，把公鑰的內(nèi)容追加到authorized_keys文件末尾（，如果沒(méi)有可以新建）： cat ~/.ssh/authorized_keys如果提示下面信息，則需要?jiǎng)?chuàng)建./ssh目錄：bash: /root/.ssh/authorized_keys: No such file or directory//創(chuàng)建/.ssh目錄,再追加公鑰內(nèi)容 mkdir ~/.ssh cat ~/.ssh/authorized_keys并設(shè)置authorized_keys的訪問(wèn)權(quán)限： chmod 600 ~/.ssh/authorized_keys測(cè)試：在node168點(diǎn)上執(zhí)行ssh node169，正常情況下，不需要密碼就能直接登陸進(jìn)去了。在node168節(jié)點(diǎn)出現(xiàn)下面表示成功登錄node169節(jié)點(diǎn)：以同樣的方式將公鑰拷貝至其他節(jié)點(diǎn)服務(wù)器上。 . 關(guān)閉SELINUX（所有節(jié)點(diǎn)）關(guān)閉linux SELINUX安全內(nèi)核 setenforce 0 （臨時(shí)生效）修改 /etc/selinux/config 下的 SELINUX=disabled （重啟后永久生效） vi /etc/selinux/config內(nèi)容增加：SELINUX=disabled 重啟后生效： reboot查看SELINUX 是否關(guān)閉：sestatus （在Centos7中遇到SELINUX無(wú)法關(guān)閉的問(wèn)題，重新啟動(dòng)機(jī)器恢復(fù)正常）. 修改Linux內(nèi)核參數(shù)（所有節(jié)點(diǎn)）為避免安裝過(guò)程中出現(xiàn)的異常問(wèn)題，首先調(diào)整Linux內(nèi)核參數(shù)。1) 設(shè)置swappiness，控制換出運(yùn)行時(shí)內(nèi)存的相對(duì)權(quán)重，Cloudera 建議將 swappiness 設(shè)置為 10：//查看swappiness cat /proc/sys/vm/swappiness//永久性修改，執(zhí)行下面兩條命令 sysctl w =10 echo = 10 /etc/ 2) 關(guān)閉透明大頁(yè)面：自CentOS6版本開(kāi)始引入了Transparent Huge Pages(THP)，從CentOS7版本開(kāi)始，該特性默認(rèn)就會(huì)啟用。盡管THP的本意是為提升內(nèi)存的性能，不過(guò)某些數(shù)據(jù)庫(kù)廠商還是建議直接關(guān)閉THP，否則可能會(huì)導(dǎo)致性能出現(xiàn)下降。首先查看透明大頁(yè)是否啟用，[always] never表示已啟用，always [never]表示已禁用： cat /sys/kernel/mm/transparent_hugepage/defrag[always] madvise never cat /sys/kernel/mm/transparent_hugepage/enabled[always] madvise never以上狀態(tài)就說(shuō)明是啟用的。臨時(shí)關(guān)閉（重啟機(jī)器會(huì)變回默認(rèn)開(kāi)啟狀態(tài)）： echo never /sys/kernel/mm/transparent_hugepage/defragecho never /sys/kernel/mm/transparent_hugepage/enabled永久關(guān)閉：//編輯/etc/ vi /etc///在文件后添加下面內(nèi)容:if test f /sys/kernel/mm/transparent_hugepage/enabled。 thenecho never /sys/kernel/mm/transparent_hugepage/enabledfiif test f /sys/kernel/mm/transparent_hugepage/defrag。 thenecho never /sys/kernel/mm/transparent_hugepage/defragfi保存退出，：chmod +x /etc/重啟系統(tǒng)，以后再檢查THP狀態(tài)，顯示狀態(tài)被禁用了。3) 修改文件句柄數(shù)：修改系統(tǒng)文件句柄數(shù)限制：//查看文件句柄數(shù)，顯示1024，顯然太小 ulimit n 1024//修改限制vi /etc/security/ //在文件后加入下面內(nèi)容：* soft nofile 100000* hard nofile 10
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1