轻松入门大数据第3章入门到进阶：系统玩转分布式文件系统HDFS 3.1 Hadoop之HDFS 3.1.17 HDFS命令行操作之其他常用操作

系统管理员 2024-03-22 17:15 28阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第3章 入门到进阶：系统玩转分布式文件系统HDFS
         *   *  3.1 Hadoop之HDFS
             *   *  3.1.17 HDFS命令行操作之其他常用操作

![在这里插入图片描述][263f1904344043edb0d6ec1791b2379d.png_pic_center]

#### 第3章 入门到进阶：系统玩转分布式文件系统HDFS ####

##### 3.1 Hadoop之HDFS #####

> 1.  初识HDFS
> 2.  HDFS假设和目标
> 3.  HDFS架构
> 4.  文件系统命名空间
> 5.  副本
> 6.  HDFS优缺点
> 7.  单节点HDFS部署
> 8.  HDFS命令行使用
> 9.  HDFS Java API使用
> 10. HDFS读写数据流程
> 11. 工作机制
> 12. 安全模式

###### 3.1.17 HDFS命令行操作之其他常用操作 ######

服务器文件系统中的【拷贝】：

`hadoop fs -cp /1/1-1.txt /2`

![在这里插入图片描述][7455ac231778422dbb89cf81d28efb47.png_pic_center]

没问题

【移动】

`hadoop fs -mv /1/1-2.txt /2`

![在这里插入图片描述][5154f3ebe04840b19aa4752f206a7ecc.png_pic_center]

这是2

![在这里插入图片描述][81867684a0b343f9a4b46b18a900c99a.png_pic_center]

1 已经没了，没问题

删除`/1/1-1.txt`

`hadoop fs -rm /1/1-1.txt`

![在这里插入图片描述][14d60c2e22dd4f7b9b241e9d37ea6c01.png_pic_center]

![在这里插入图片描述][36363c0fa6184b88a6659dcba9d93a59.png_pic_center]

没问题

直接删掉`/1` 文件夹，`hadoop fs -rm -r /1`

注意加上`-r` 参数，不然会提示目录不能够删除

![在这里插入图片描述][14367e10630b4d53b03c1c0240b8c891.png_pic_center]

![在这里插入图片描述][36fec743646d4cc08baa5b2c3b2d3efe.png_pic_center]

没问题

【递归创建目录】

`hadoop fs -mkdir -p /1/11/111`

![在这里插入图片描述][97086442340c4487b4c60dbab5116bb0.png_pic_center]

不加`-p` 参数会出错

![在这里插入图片描述][750dfbeb87574661a55f1566ea98c071.png_pic_center]

没问题。

![在这里插入图片描述][f94bb2fbdc0744728b6478101853692d.png_pic_center]

【修改权限】其实和Linux 是一样的

`hadoop fs -chmod 666 /2/1-2.txt`

![在这里插入图片描述][7554f54dc1dc4320ad7390aad2a88128.png_pic_center]

![在这里插入图片描述][cf9fe16aa00345508032dbc985d4637a.png_pic_center]

没问题

【修改归属组】

`hadoop fs -chown hadoop:hadoop /2/1-2.txt`

![在这里插入图片描述][3c4468dd672c4ca5be7536d1316b6048.png_pic_center]

![在这里插入图片描述][17d8b0bc6b0c4146b3456a0c944da580.png_pic_center]

【修改副本系数】

`hadoop fs -du -s -h /2`

![在这里插入图片描述][cdd3ab389c8c4199bb717892386bfde8.png_pic_center]

`hadoop fs -du -h /2`

![在这里插入图片描述][d2d26dd330b541d884a8f92ac3554ffc.png_pic_center]

现在看不明白没关系，我们先改一下副本系数，当前副本系数是1

`hadoop fs -setrep 3 /2/1-1.txt`

虽然我当前只有1个节点，但是也可以支持3 副本

![在这里插入图片描述][192a9e41fdf14f8fbb98dc72b0e77467.png_pic_center]

![在这里插入图片描述][528168dfaacd44eea993756d2e13bd0a.png_pic_center]

当然也只是这里改了，实际上没有意义，因为当前只有这一个机器

再试一次我们上面那个命令

![在这里插入图片描述][61385bba05d74696beeb633b8bb5dda0.png_pic_center]

4 是文件大小，12 = 4 x 3 即文件大小 x 副本系数

【概览查看文件夹】

![在这里插入图片描述][c4778f02f7ae405b9c9aecd2941cb522.png_pic_center]

大概就是这些。

[263f1904344043edb0d6ec1791b2379d.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/b982a1f362bd47548e1d1c0797aa81f9.png
[7455ac231778422dbb89cf81d28efb47.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/510d9ed874d54ccdb7b9a594ba75ad58.png
[5154f3ebe04840b19aa4752f206a7ecc.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/2cf20335dca34b23a006c7a31a17e463.png
[81867684a0b343f9a4b46b18a900c99a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/30a73885d1744bdf9e38cbb80ed5257e.png
[14d60c2e22dd4f7b9b241e9d37ea6c01.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/1de5d1ecff364952b1a55a8626e0901d.png
[36363c0fa6184b88a6659dcba9d93a59.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/97ffb10e45504e6aa3526baef264c6af.png
[14367e10630b4d53b03c1c0240b8c891.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/aedd3887598f450296d8ec32817e415f.png
[36fec743646d4cc08baa5b2c3b2d3efe.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/c1b1998cddcd4a1f9ae49c339fae674d.png
[97086442340c4487b4c60dbab5116bb0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/a11becc359494881be6b35e74c51d6b2.png
[750dfbeb87574661a55f1566ea98c071.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/fb506c2a1aa1417aab77e50e69260bcc.png
[f94bb2fbdc0744728b6478101853692d.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/b6615110a56a471b83a6bb2d09247903.png
[7554f54dc1dc4320ad7390aad2a88128.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/1a87b0a48b0b4e91b1152adb245e7154.png
[cf9fe16aa00345508032dbc985d4637a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/67bf602d5035403489e9dc5c8186d864.png
[3c4468dd672c4ca5be7536d1316b6048.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/11092ab51607421ca3a5d6a7806d717d.png
[17d8b0bc6b0c4146b3456a0c944da580.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/e08b6aae69304b28b6e669ec044a120e.png
[cdd3ab389c8c4199bb717892386bfde8.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/a1eeb515ac86413c8e03e4478e6a6f93.png
[d2d26dd330b541d884a8f92ac3554ffc.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/78b5cebe44f54d8bbdcbefb5f0fda782.png
[192a9e41fdf14f8fbb98dc72b0e77467.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/17689cebabd54f3f97e00ff22b84fded.png
[528168dfaacd44eea993756d2e13bd0a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/e55c80af21e942f4a166d53432409de3.png
[61385bba05d74696beeb633b8bb5dda0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/f81e2137c71744659dfccec87c8305bd.png
[c4778f02f7ae405b9c9aecd2941cb522.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/18/59bb13edc7cf4fcdad12b14e73f4f81a.png