linux下hadoop集群常用命令有哪些

發(fā)布時間：2020-05-25 11:23:58 來源：億速云閱讀：674 作者：栢白欄目：建站服務(wù)器

linux下hadoop集群常用命令有哪些？Hadoop是一個由Apache基金會所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu)。用戶可以在不了解分布式底層細節(jié)的情況下，開發(fā)分布式程序。充分利用集群的威力進行高速運算和存儲。

上傳文件

1）hadoop fs -put words.txt /path/to/input/
2）hdfs dfs -put words.txt /path/wc/input/

查看某目錄下所含文件

1）hadoop fs -ls /path/wc/input/
2）hadoop fs -ls hdfs://node1:9000/path/wc/input/

與linux文件系統(tǒng)中的用法一樣，對文件所屬權(quán)限

1）hadoop fs -chmod 666 /hello.txt
2）hadoop fs -chown someuser:somegrp /hello.txt

du統(tǒng)計文件大小

hadoop fs -du -h / # 統(tǒng)計文件夾下每個文件的大小
hadoop fs -du -s -h / #統(tǒng)計這個文件夾總大小，返回的數(shù)據(jù)是，文件夾大小，備份總大小
hadoop fs -count / # 統(tǒng)計文件數(shù)量，返回的數(shù)據(jù)是目錄個數(shù)，文件個數(shù)，文件總計大小，輸入路徑

殺死yarn任務(wù)

yarn application -kill application_id

查看yarn日志

yarn logs -applicationId application_id > logs.txt

億速云的容器云產(chǎn)品是通過docker技術(shù)，在集群服務(wù)器上部署容器服務(wù)實現(xiàn)，擁有上萬Linux鏡像，功能強大、簡單易用，可輕松構(gòu)建集群服務(wù)。

向AI問一下細節(jié)

linux下hadoop集群常用命令有哪些

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標簽