單機Hadoop搭建

發(fā)布時間：2020-06-22 03:45:38 來源：網(wǎng)絡(luò) 閱讀：244 作者：大云技術(shù) 欄目：大數(shù)據(jù)

1.下載hadoop-2.7.3.tar.gz

http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz

2.解壓hadoop-2.7.3.tar.gz

3.進入hadoop-2.7.3目錄

單機Hadoop搭建
4.修改配置etc/hadoop/

（1）core-site.xml

單機Hadoop搭建
（2）hdfs-site.xml

單機Hadoop搭建
注意：因為是單機，所以復(fù)制數(shù)為1；目錄不能是tmp，以免數(shù)據(jù)丟失；

（3）mapred-site.xml

單機Hadoop搭建
注意：如果沒有這個文件，則cp mapred-site.xml.template mapred-site.xml

（4）yarn-site.xml

單機Hadoop搭建
5.格式化hdfs

bin/hadoop namenode -format

6.啟動hadoop

sbin/hadoop-daemon.sh start namenode

sbin/hadoop-daemon.sh start datanode

sbin/yarn-daemon.sh start resourcemanager

sbin/yarn-daemon.sh start nodemanager

jps（查看是否啟動成功）

單機Hadoop搭建
7.檢查hadoop及yarn狀態(tài)

http://localhost:50070

http://localhost:8088

單機Hadoop搭建

8.測試

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar pi 5 1000

單機Hadoop搭建
通過yarn頁面可以查看任務(wù)運行情況。

向AI問一下細節(jié)

猜你喜歡