您好,登錄后才能下訂單哦!
這篇文章主要介紹Hadoop0.20.2集群如何配置,文中介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們一定要看完!
一、hadoop啟動(dòng)
先格式化一個(gè)新的分布式文件系統(tǒng)
$cdhadoop-0.20.2
$bin/hadoopnamenode-format
查看輸出保證分布式文件系統(tǒng)格式化成功。
Hadoop0.20.2集群配置過程中在主節(jié)點(diǎn)master上面啟動(dòng)hadoop,主節(jié)點(diǎn)會(huì)啟動(dòng)所有從節(jié)點(diǎn)的hadoop。
$bin/start-all.sh
從主節(jié)點(diǎn)master關(guān)閉hadoop,主節(jié)點(diǎn)會(huì)關(guān)閉所有從節(jié)點(diǎn)的hadoop。
$bin/stop-all.sh
Hadoop守護(hù)進(jìn)程的日志寫入到${HADOOP_LOG_DIR}目錄(默認(rèn)是${HADOOP_HOME}/logs).
瀏覽NameNode和JobTracker的網(wǎng)絡(luò)接口,它們的地址默認(rèn)為:
NameNode-http://master:50070/
JobTracker-http://master:50030/
將輸入文件拷貝到分布式文件系統(tǒng):$bin/hadoopfs-putconfinput
運(yùn)行發(fā)行版提供的示例程序:$bin/hadoopjarhadoop-0.20.2-examples.jargrepinputoutput'dfs[a-z.]+'
查看輸出文件:
將輸出文件從分布式文件系統(tǒng)拷貝到本地文件系統(tǒng)查看:
$bin/hadoopfs-getoutputoutput
$catoutput/*
或者
在分布式文件系統(tǒng)上查看輸出文件:$bin/hadoopfs-catoutput/*
啟動(dòng)運(yùn)行成功后,可以多熟悉熟悉hadoopdfs命令,例如:
hadoopdfs–ls查看/usr/root目錄下的內(nèi)容,默認(rèn)如果不填路徑這就是當(dāng)前用戶路徑;
hadoopdfs–rmrxxxxxx就是刪除目錄;
hadoopdfsadmin-report這個(gè)命令可以全局的查看DataNode的情況;
hadoopjob-list后面增加參數(shù)是對(duì)于當(dāng)前運(yùn)行的Job的操作,例如list,kill等;
hadoopbalancer均衡磁盤負(fù)載的命令。
以上是“Hadoop0.20.2集群如何配置”這篇文章的所有內(nèi)容,感謝各位的閱讀!希望分享的內(nèi)容對(duì)大家有幫助,更多相關(guān)知識(shí),歡迎關(guān)注億速云行業(yè)資訊頻道!
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。