溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

centos6.4安裝hadoop2.4.1

發(fā)布時間:2020-07-23 01:51:58 來源:網(wǎng)絡(luò) 閱讀:464 作者:飛俠119 欄目:大數(shù)據(jù)

#關(guān)閉防火墻

 

 service iptablesstop

1:安裝JDK

1.1上傳jdk-7u_65-i585.tar.gz

1.2解壓jdk

#創(chuàng)建文件夾

     mkdir /home/hadoop/app

#解壓

     tar -zxvf jdk-7u55-linux-i586.tar.gz -C /home/hadoop/app

1.3java添加到環(huán)境變量中

     sudo vim /etc/profile

#在文件最后添加

     export JAVA_HOME=/home/hadoop/app/jdk-7u_65-i585

     export PATH=$PATH:$JAVA_HOME/bin

#刷新配置

     source /etc/profile



2:安裝hadoop2.4.1


注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop

     偽分布式需要修改5個配置文件

2.1配置hadoop  /home/hadoop/app/hadoop-2.4.1/etc/hadoop

第一個:hadoop-env.sh

     vim hadoop-env.sh

     #27

     export JAVA_HOME=/home/hadoop/app/jdk1.7.0_65

第二個:core-site.xml

          

 

     fs.defaultFS

     hdfs://weekend-1206-01(主機名):9000

 

          

 

     hadoop.tmp.dir

     /home/hadoop/app/hadoop-2.4.1/data

   

第三個:hdfs-site.xml  hdfs-default.xml (3)

          

 

     dfs.replication

     1

 

第四個:mapred-site.xml (mv mapred-site.xml.templatemapred-site.xml)

          mv mapred-site.xml.template mapred-site.xml

          vim mapred-site.xml

          

 

     mapreduce.framework.name

     yarn

 

第五個:yarn-site.xml

          

 

     yarn.resourcemanager.hostname

     weekend-1206-01(主機名)

 

          

 

     yarn.nodemanager.aux-services

     mapreduce_shuffle

 


3:啟動hadoop

3.1:將hadoop添加到環(huán)境變量      vim /etc/proflie

export JAVA_HOME=/usr/java/jdk1.7.0_65

exportHADOOP_HOME=/home/hadoop/app/hadoop-2.4.1

exportPATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

#source /etc/profile

3.2: 格式化namenode(是對namenode進行初始化)

#hadoop namenode-format

3.3:啟動  /home/hadoop/app/hadoop-2.4.1/sbin

先啟動HDFS

#start-dfs.sh

再啟動YARN

#start-yarn.sh

使用jps命令驗證

#jps

centos6.4安裝hadoop2.4.1

【注:做集群時在vim/home/hadoop/app/hadoop-2.4.1/etc/hadoop/slaves添加相應(yīng)的主機名】

4:瀏覽器訪問:


http://ip:50070 HDFS管理界面)

centos6.4安裝hadoop2.4.1

centos6.4安裝hadoop2.4.1


向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI