如何安裝hadoop-2.8.4

這篇文章給大家分享的是有關(guān)如何安裝hadoop-2.8.4的內(nèi)容。小編覺(jué)得挺實(shí)用的，因此分享給大家做個(gè)參考，一起跟隨小編過(guò)來(lái)看看吧。

core-site.xml

<!-- 指定HDFS中NameNode的地址 -->
<property>
<name>fs.defaultFS</name>
<value>hdfs://主機(jī)名1:9000</value>
</property>

<!-- 指定hadoop運(yùn)行時(shí)產(chǎn)生文件的存儲(chǔ)目錄 -->
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/module/hadoop-2.X.X/data/tmp</value>
</property>

hdfs-site.xml

<!--數(shù)據(jù)冗余數(shù)-->
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<!--secondary的地址-->
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>主機(jī)名1:50090</value>
</property>
<!--關(guān)閉權(quán)限-->
<property>
<name>dfs.permissions</name>
<value>false</value>
</property>

yarn-site.xml

<!-- reducer獲取數(shù)據(jù)的方式 -->
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>

<!-- 指定YARN的ResourceManager的地址 -->
<property>
<name>yarn.resourcemanager.hostname</name>
<value>主機(jī)名1</value>
</property>
<!-- 日志聚集功能使能 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>
<!-- 日志保留時(shí)間設(shè)置7天(秒) -->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>604800</value>
</property>

mapred-site.xml

<!-- 指定mr運(yùn)行在yarn上-->
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<!--歷史服務(wù)器的地址-->
<property>
<name>mapreduce.jobhistory.address</name>
<value>主機(jī)名1:10020</value>
</property>
<!--歷史服務(wù)器頁(yè)面的地址-->
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>主機(jī)名1:19888</value>
</property>

hadoop-env.sh、yarn-env.sh、mapred-env.sh（分別在這些的文件中添加下面的路徑）

export JAVA_HOME=/usr/java/jdk1.8（注：是自己安裝的路徑

啟動(dòng)集群得命令

Namenode的主節(jié)點(diǎn)：sbin/start-dfs.sh
Yarn的主節(jié)點(diǎn)：sbin/stop-yarn.sh

測(cè)試

hadoop fs -put 文件名 /

感謝各位的閱讀！關(guān)于“如何安裝hadoop-2.8.4”這篇文章就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，讓大家可以學(xué)到更多知識(shí)，如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到吧！