HDFS-命令行相关

柔光的暖阳◎ 2023-10-16 15:22 22阅读 0赞

#### HDFS-命令行相关 ####

*  ls 列出目录
 *  mkdir 创建目录
 *  put 上传文件
 *  cp复制
 *  mv移动
 *  appendToFile内容追加
 *  cat

## ls 列出目录 ##

hadoop fs -ls 需要查看的文件目录
    如
    hadoop fs -ls /

## mkdir 创建目录 ##

hadoop fs -mkdir 需要创建的文件的路径
    hadoop fs -mkdir /test/
    
    也可以使用 -p 参数创建多级目录，如果父目录不存在，则会自动创建，命令如下：
    hadoop fs -mkdir -p 需要创建的多级目录路径
    hadoop fs -mkdir -p /output/file

## put 上传文件 ##

使用 put 命令可以将本地文件上传到HDFS系统中

hadoop fs -put 需要上传的文件地址 上传到HDFS的文件地址 
    hadoop fs -put ~/a.txt /

## cp复制 ##

使用 cp 命令可以复制HDFS中的文件到另一个文件，在移动的过程中可以给文件重命名。此时源文件还存在（类似于复制），例如将文件 /input/a.txt 文件移动到 /input/b.txt，命令如下

hadoop fs -cp 源文件的路径 移动后的路径及名称
    hadoop fs -cp /input/a.txt /input/b.txt

## mv移动 ##

使用 mv 命令可以复制HDFS中的文件到另一个文件，在移动的过程中可以给文件重命名。此时源文件不存在（类似于剪切），例如将文件 /input/a.txt 文件移动到 /input/b.txt，命令如下

hadoop fs -mv 源文件的路径 移动后的路径及名称
    hadoop fs -mv /input/a.txt /input/b.txt

## appendToFile内容追加 ##

使用 appendToFile 命令可以将单个或者多个文件的内容追加到HDFS系统的文件中。例如，将本地当前目录的 a.txt 文件的内容追加到HDFS系统中 /input/b.txt 文件中，命令如下：

hadoop fs -appendToFile 需要加入的内容文件路径 被追加内容的文件路径
    hadoop fs -appendToFile a.txt /input/b.txt