Hadoop的集群環(huán)境怎么搭建

本篇內(nèi)容主要講解“Hadoop的集群環(huán)境怎么搭建”，感興趣的朋友不妨來(lái)看看。本文介紹的方法操作簡(jiǎn)單快捷，實(shí)用性強(qiáng)。下面就讓小編來(lái)帶大家學(xué)習(xí)“Hadoop的集群環(huán)境怎么搭建”吧!

首先修改Master的core-site.xml文件，此時(shí)的文件內(nèi)容是：

我們把“l(fā)ocalhost”域名修改為“Master”:

同樣的操作分別打開(kāi)Slave1和Slave2節(jié)點(diǎn)core-site.xml，把“l(fā)ocalhost”域名修改為“Master”。

其次修改Master、Slave1、Slave2的mapred-site.xml文件.

進(jìn)入Master節(jié)點(diǎn)的mapred-site.xml文件把“l(fā)ocalhost”域名修改為“Master”，保存退出。

同理，打開(kāi)Slave1和Slave2節(jié)點(diǎn)mapred-site.xml，把“l(fā)ocalhost”域名修改為“Master”，保存退出。

最后修改Master、Slave1、Slave2的hdfs-site.xml文件：

我們把三臺(tái)機(jī)器上的“dfs.replication”值由1改為3，這樣我們的數(shù)據(jù)就會(huì)有3份副本：

保存退出。

Step 4：修改兩臺(tái)機(jī)器中hadoop配置文件的masters和slaves文件

首先修改Master的masters文件：

進(jìn)入文件：

把“l(fā)ocalhost”改為“Master”：

保存退出。

修改Master的slaves文件，

進(jìn)入該文件：

具體修改為：

保存退出。

從上面的配置可以看出我們把Master即作為主節(jié)點(diǎn)，又作為數(shù)據(jù)處理節(jié)點(diǎn)，這是考慮我們數(shù)據(jù)的3份副本而而我們的機(jī)器臺(tái)數(shù)有限所致。

把Master配置的masters和slaves文件分別拷貝到Slave1和Slave2的Hadoop安裝目錄下的conf文件夾下：

進(jìn)入Slave1或者Slave2節(jié)點(diǎn)檢查masters和slaves文件的內(nèi)容：

發(fā)現(xiàn)拷貝完全正確。

至此Hadoop的集群環(huán)境終于配置完成！

到此，相信大家對(duì)“Hadoop的集群環(huán)境怎么搭建”有了更深的了解，不妨來(lái)實(shí)際操作一番吧！這里是億速云網(wǎng)站，更多相關(guān)內(nèi)容可以進(jìn)入相關(guān)頻道進(jìn)行查詢，關(guān)注我們，繼續(xù)學(xué)習(xí)！