溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

HDFS常用命令有哪些

發(fā)布時間:2021-07-21 09:29:51 來源:億速云 閱讀:153 作者:chen 欄目:大數據

本篇內容介紹了“HDFS常用命令有哪些”的有關知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領大家學習一下如何處理這些情況吧!希望大家仔細閱讀,能夠學有所成!

  • HDFS命令有兩種風格,均可使用,效果相同:

    • hadoop fs開頭的

    • hdfs dfs開頭的

  1. 如何查看hdfs或hadoop子命令的幫助信息,如ls子命令

hdfs dfs -help lshadoop fs -help ls #兩個命令等價
  1. 查看hdfs文件系統(tǒng)中指定目錄的文件列表。對比linux命令ls

hdfs dfs -ls /hadoop fs -ls /hdfs dfs -ls -R /

2、在hdfs文件系統(tǒng)中創(chuàng)建文件

hdfs dfs -touchz /edits.txthdfs dfs -ls /

3、向HDFS文件中追加內容

hadoop fs -appendToFile edit1.xml /edits.txt #將本地磁盤當前目錄的edit1.xml內容追加到HDFS根目錄 的edits.txt文

4、查看HDFS文件內容

hdfs dfs -cat /edits.txthdfs dfs -text /edits.txt

5、從本地路徑上傳文件至HDFS

#用法:hdfs dfs -put /本地路徑 /hdfs路徑hdfs dfs -put /linux本地磁盤文件 /hdfs路徑文件hdfs dfs -copyFromLocal /linux本地磁盤文件 /hdfs路徑文件  #跟put作用一樣hdfs dfs -moveFromLocal /linux本地磁盤文件 /hdfs路徑文件  #跟put作用一樣,只不過,源文件被拷貝成功后,會被刪除

6、在hdfs文件系統(tǒng)中下載文件

hdfs dfs -get /hdfs路徑 /本地路徑hdfs dfs -copyToLocal /hdfs路徑 /本地路徑  #根get作用一

7、在hdfs文件系統(tǒng)中下載文件

hdfs dfs -get /hdfs路徑 /本地路徑hdfs dfs -copyToLocal /hdfs路徑 /本地路徑  #根get作用一樣

8、在hdfs文件系統(tǒng)中創(chuàng)建目錄

hdfs dfs -mkdir /shell

9、在hdfs文件系統(tǒng)中刪除文件

hdfs dfs -rm /edits.txt將文件徹底刪除(被刪除文件不放到hdfs的垃圾桶里)how?hdfs dfs -rm -skipTrash /xcall

10、在hdfs文件系統(tǒng)中修改文件名稱(也可以用來移動文件到目錄)

hdfs dfs -mv /xcall.sh /call.shhdfs dfs -mv /call.sh /shell

11、在hdfs中拷貝文件到目錄

hdfs dfs -cp /xrsync.sh /shel
  • 許多命令與linux命令有很大的相似性,

  • 有用的==help==,如查看ls命令的使用說明:hadoop fs -help ls

  • 絕大多數的大數據框架的命令,也有類似的help信息

“HDFS常用命令有哪些”的內容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關的知識可以關注億速云網站,小編將為大家輸出更多高質量的實用文章!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內容(圖片、視頻和文字)以原創(chuàng)、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI