Hadoop - 命令參考



雖然這裡只演示了 **"$HADOOP_HOME/bin/hadoop fs"** 中的一些基本命令,但實際上它包含了更多命令。執行 ./bin/hadoop dfs 而不帶任何額外引數將列出所有可以使用 FsShell 系統執行的命令。此外,如果您遇到問題,可以使用 **$HADOOP_HOME/bin/hadoop fs -help** 命令名稱來檢視相關操作的簡要使用說明。

下面列出了所有操作的表格。以下約定用於引數:-

"<path>" means any file or directory name. 
"<path>..." means one or more file or directory names. 
"<file>" means any filename. 
"<src>" and "<dest>" are path names in a directed operation. 
"<localSrc>" and "<localDest>" are paths as above, but on the local file system. 

所有其他檔案和路徑名都指的是 HDFS 中的物件。

序號 命令及描述
1

-ls <path>

列出指定路徑目錄的內容,顯示每個條目的名稱、許可權、所有者、大小和修改日期。

2

-lsr <path>

類似於 -ls,但遞迴顯示路徑所有子目錄中的條目。

3

-du <path>

顯示與路徑匹配的所有檔案的磁碟使用情況(以位元組為單位);檔名將以完整的 HDFS 協議字首報告。

4

-dus <path>

類似於 -du,但列印路徑中所有檔案/目錄的磁碟使用情況摘要。

5

-mv <src><dest>

將由 src 指定的檔案或目錄移動到 HDFS 中的 dest。

6

-cp <src> <dest>

將由 src 標識的檔案或目錄複製到 HDFS 中的 dest。

7

-rm <path>

刪除由路徑標識的檔案或空目錄。

8

-rmr <path>

刪除由路徑標識的檔案或目錄。遞迴刪除任何子條目(即路徑的檔案或子目錄)。

9

-put <localSrc> <dest>

將本地檔案系統中由 localSrc 標識的檔案或目錄複製到 DFS 中的 dest。

10

-copyFromLocal <localSrc> <dest>

與 -put 相同

11

-moveFromLocal <localSrc> <dest>

將本地檔案系統中由 localSrc 標識的檔案或目錄複製到 HDFS 中的 dest,然後在成功後刪除本地副本。

12

-get [-crc] <src> <localDest>

將 HDFS 中由 src 標識的檔案或目錄複製到由 localDest 標識的本地檔案系統路徑。

13

-getmerge <src> <localDest>

檢索與 HDFS 中的路徑 src 匹配的所有檔案,並將它們複製到本地檔案系統中由 localDest 標識的單個合併檔案中。

14

-cat <filen-ame>

在標準輸出上顯示檔名的內容。

15

-copyToLocal <src> <localDest>

與 -get 相同

16

-moveToLocal <src> <localDest>

類似於 -get,但在成功後刪除 HDFS 副本。

17

-mkdir <path>

在 HDFS 中建立名為 path 的目錄。

建立路徑中缺少的任何父目錄(例如,Linux 中的 mkdir -p)。

18

-setrep [-R] [-w] rep <path>

將由路徑標識的檔案的目標複製因子設定為 rep。(實際複製因子將隨著時間的推移向目標移動)

19

-touchz <path>

在路徑處建立一個檔案,其中包含當前時間作為時間戳。如果路徑處已存在檔案,則失敗,除非檔案大小已為 0。

20

-test -[ezd] <path>

如果路徑存在;長度為零;或為目錄,則返回 1;否則返回 0。

21

-stat [format] <path>

列印有關路徑的資訊。格式是一個字串,接受以塊為單位的檔案大小(%b)、檔名(%n)、塊大小(%o)、複製(%r)和修改日期(%y、%Y)。

22

-tail [-f] <file2name>

在標準輸出上顯示檔案的最後 1KB。

23

-chmod [-R] mode,mode,... <path>...

更改與由 path 標識的一個或多個物件關聯的檔案許可權.... 使用 R 遞迴執行更改。mode 是一個 3 位八進位制模式,或 {augo}+/-{rwxX}。假設如果未指定範圍並且不應用 umask。

24

-chown [-R] [owner][:[group]] <path>...

設定由路徑標識的檔案或目錄的所有者使用者和/或組.... 如果指定 -R,則遞迴設定所有者。

25

-chgrp [-R] group <path>...

設定由路徑標識的檔案或目錄的所有者組.... 如果指定 -R,則遞迴設定組。

26

-help <cmd-name>

返回上面列出的命令之一的使用資訊。您必須省略 cmd 中的開頭'-' 字元。

廣告