HDFS常用的文件操作命令

迷南。 2022-05-29 10:40 304阅读 0赞

### HDFS常用的文件操作命令 ###

#### 文件操作 ####

*  **查看文件命令**

**ls 命令**

# 查看hdfs根目录
    hdfs dfs -ls /
    
    # 查看hdfs其它目录(/user/zhang)
    hdfs dfs -ls /user/zhang

**du 命令**

hdfs dfs -du /user/zhang
    
    # 将字节自动转化成单位
    hdfs dfs -du -h /user/zhang

**df 命令**

# 查看根目录磁盘空间
    hdfs dfs -df /

*  **复制文件和获取文件命令**

**put 命令**

# 将client node中的NOTICE.txt文件 put 到hdfs的/user/zhang文件夹中
    hdfs dfs -put NOTICE.txt /user/zhang
    
    # 如果文件存在，可以使用-f参数进行覆盖
    hdfs dfs -put -f NOTICE.txt /user/zhang

**get 命令**

# 获取hdfs中的/user/zhang/test/README.txt.gz文件，到client node当前目录
    
    hdfs dfs -get /user/zhang/test/README.txt.gz
    
    和copyToLocal命令一样

**copyFromLocal 命令**

# 这个命令和put作用相同
    hdfs dfs -copyFromLocal LICENSE.txt /user/zhang
    
    如果存在LCENSE.txt文件，要进行覆盖，加上-f参数，和put命令一样

**copyToLocal 命令**

# 复制hdfs的/user/zhang/test/README.txt文件到client node当前目录
    hdfs dfs -copyToLocal /user/zhang/test/README.txt
    
    
    # 如果需要复制到指定目录
    hdfs dfs -copyToLocal /user/zhang/test/README.txt /指定目录

**cp 命令**

# 将/user/zhang/NOTICE.txt 复制到 /user/zhang/test目录
    hdfs dfs -cp /user/zhang/NOTICE.txt /user/zhang/test

*  **创建文件夹**

**mkdir命令**

# 创建一个abc目录
    hdfs dfs -mkdir /user/zhang/abc

*  **删除文件命令**

**rm命令**

# 删除/user/zhang/NOTICE.txt文件
    hdfs dfs -rm /user/zhang/NOTICE.txt
    
    # 删除/user/zhang/abc目录
    hdfs dfs -rm -r /user/zhang/abc

**rmdir 命令**

# 删除/user/zhang/demo目录
    hdfs dfs rmdir /user/zhang/demo

*  **查看文件命令**

**cat 命令**