轻松入门大数据第3章入门到进阶：系统玩转分布式文件系统HDFS 3.1 Hadoop之HDFS 3.1.14 HDFS命令行操作之文件上传

向右看齐 2024-03-22 16:17 13阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第3章 入门到进阶：系统玩转分布式文件系统HDFS
         *   *  3.1 Hadoop之HDFS
             *   *  3.1.14 HDFS命令行操作之文件上传

![在这里插入图片描述][8fe230a799ca4eb582a0c54953683f94.png_pic_center]

#### 第3章 入门到进阶：系统玩转分布式文件系统HDFS ####

##### 3.1 Hadoop之HDFS #####

> 1.  初识HDFS
> 2.  HDFS假设和目标
> 3.  HDFS架构
> 4.  文件系统命名空间
> 5.  副本
> 6.  HDFS优缺点
> 7.  单节点HDFS部署
> 8.  HDFS命令行使用
> 9.  HDFS Java API使用
> 10. HDFS读写数据流程
> 11. 工作机制
> 12. 安全模式

###### 3.1.14 HDFS命令行操作之文件上传 ######

文件上传（本地：Linux系统  服务器：HDFS文件系统）
      -moveFromLocal  将本地文件移动到HDFS上去，操作之后，本地文件不存在了
      -copyFromLocal  将本地文件拷贝到HDFS上去，操作之后，本地文件还是存在的
      -put 等同于-copyFromLocal  ***** 
      -appendToFile 追加文件内容到已经存在的文件内容最后

先创建一个目录，名为1

`hadoop fs -mkdir /1`

![在这里插入图片描述][344eaded743147e9ab8a751d811954f2.png_pic_center]

怎么看看这个目录长啥样，我们可以在Web UI里面看

![在这里插入图片描述][e78f786f2f8f449c8cbf0cfec62ea672.png_pic_center]

![在这里插入图片描述][1bc37a12960742389eeaae00ea043e66.png_pic_center]

就是这个Name 为1 的东西，以d 开头，说明就是一个目录，和Linux 一样的

![在这里插入图片描述][a5f5e6c2a61848e5a9984c227a257463.png_pic_center]

点进去，OK，没有东西，这样就创建了一个名为`1` 的文件夹

随便来一个 `1-1.txt` 文件

![在这里插入图片描述][539f953feaaf4c61829193c0240c942a.png_pic_center]

把这个文件传到`/1` 文件夹中去

执行命令 `hadoop fs -moveFromLocal 1-1.txt /1`

![在这里插入图片描述][a71f49c160c7443ab2682412596084c5.png_pic_center]

可以看到移过去后，本地就没了

看看文件夹中

![在这里插入图片描述][0af19a5a48294039a2fe1acb379e590e.png_pic_center]

没问题，有的，而且块大小128M

点击查看

![在这里插入图片描述][50580e5cd15c4113821516ba4d6a8c73.png_pic_center]

没问题，内容正确

`-moveFromLocal 将本地文件移动到HDFS上去，操作之后，本地文件不存在了`

再试试copy 那个，新建一个`1-2.txt`，内容为`1-2`

![在这里插入图片描述][457406586e7c479fa7a3612827021aa7.png_pic_center]

执行命令`hadoop fs -copyFromLocal 1-2.txt /1`

![在这里插入图片描述][1a29fc438e1a4118902a51b64dd3156e.png_pic_center]

OK， 本地还在，看看文件夹`/1`

![在这里插入图片描述][6de6b928637c4d3688ccb596f9ce305a.png_pic_center]

没问题的

`-copyFromLocal 将本地文件拷贝到HDFS上去，操作之后，本地文件还是存在的`

再看一个

`-put 等同于-copyFromLocal *****`【这个最常用】

![在这里插入图片描述][385523399a4d452894fd639ae6f48b12.png_pic_center]

![在这里插入图片描述][1f050bc79b4148dea408c1f5dc80f269.png_pic_center]

没问题

最后一个 `-appendToFile 追加文件内容到已经存在的文件内容最后`

![在这里插入图片描述][1bf3288f11f646f19c43ae9011db9ed5.png_pic_center]

意思将`1-3-1.txt` 的文件内容追加到 `1-3.txt`

看看效果

![在这里插入图片描述][25f0d2d7439a4b13bc481d3d6419aaa0.png_pic_center]

没问题。

这就是文件上传。【注意我们说的本地是Linux 系统，目标端即服务器是我们的HDFS 文件系统】

[8fe230a799ca4eb582a0c54953683f94.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/507fc9e668384d4791513a11df3150bb.png
[344eaded743147e9ab8a751d811954f2.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/f5b1cf4318d6478f952eafdf290fe6a0.png
[e78f786f2f8f449c8cbf0cfec62ea672.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/5c52243aab914bdbb681aad57b3b3bb5.png
[1bc37a12960742389eeaae00ea043e66.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/ac616d2832f048949798405009553e4c.png
[a5f5e6c2a61848e5a9984c227a257463.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/819ab1b9ed9f4225be6b5c87d435f483.png
[539f953feaaf4c61829193c0240c942a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/0e30e90a7abb4ebaaeb325c142042faa.png
[a71f49c160c7443ab2682412596084c5.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/57d6fe08ba16407da5c00dd5d0b5bfe1.png
[0af19a5a48294039a2fe1acb379e590e.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/dd474cb18b6d4b9da9c92de28f27ad86.png
[50580e5cd15c4113821516ba4d6a8c73.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/7135f0089e8f4ebbb4279624474817b0.png
[457406586e7c479fa7a3612827021aa7.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/491b092cd8cd4609937ab7e9de41ae75.png
[1a29fc438e1a4118902a51b64dd3156e.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/79703baac9374595ade85764c0876c77.png
[6de6b928637c4d3688ccb596f9ce305a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/bbb370d1a9ee4ccc9ed29c50df9d2876.png
[385523399a4d452894fd639ae6f48b12.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/508ec7c288ac48e0b6fea48ac640d8cd.png
[1f050bc79b4148dea408c1f5dc80f269.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/1c8868dc50dc4506972bfd82604cb061.png
[1bf3288f11f646f19c43ae9011db9ed5.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/90dc650ac01f4253861abd255ad9989f.png
[25f0d2d7439a4b13bc481d3d6419aaa0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/f25ed96a26764788a863c14f1e6ae18b.png