hadoop如何部署完全分布式

發(fā)布時(shí)間：2021-12-09 16:23:01 來(lái)源：億速云閱讀：157 作者：小新欄目：云計(jì)算

這篇文章主要為大家展示了“hadoop如何部署完全分布式”，內(nèi)容簡(jiǎn)而易懂，條理清晰，希望能夠幫助大家解決疑惑，下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“hadoop如何部署完全分布式”這篇文章吧。

1、配置hosts文件為建立無(wú)密鑰通信做準(zhǔn)備

master,slave1,slave2都要做相同的配置

2、配置SSH無(wú)密鑰通信雙方互相通信

注意關(guān)閉防火墻和配置hosts network 要設(shè)置DNS和網(wǎng)關(guān)

通信原理讓雙方持有對(duì)方的公鑰，放在authorized_keys中。

3、配置jdk

4、導(dǎo)入并配置hadoop

將jdk配置在hadoop_env.sh中

配置hadoop的core-site.xml

配置mapred-site.xml

配置hdfs-site.xml

配置masters,slaves最好都用地址寫(xiě)

5、格式化hadoop只需要格式化一次就行，如果想格式化第二次需要?jiǎng)h除tmp文件夾的所有東西

6、啟動(dòng)

7、配置在eclipse中，制作插件，放在plugin下，如果有權(quán)限問(wèn)題設(shè)置權(quán)限為false

8、記得將hdfs-site.xml中的權(quán)限驗(yàn)證改為false.

以上是“hadoop如何部署完全分布式”這篇文章的所有內(nèi)容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內(nèi)容對(duì)大家有所幫助，如果還想學(xué)習(xí)更多知識(shí)，歡迎關(guān)注億速云行業(yè)資訊頻道！

向AI問(wèn)一下細(xì)節(jié)

猜你喜歡