轻松入门大数据第3章入门到进阶：系统玩转分布式文件系统HDFS 3.1 Hadoop之HDFS 3.1.2 初识HDFS

曾经终败给现在 2024-03-22 12:51 65阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第3章 入门到进阶：系统玩转分布式文件系统HDFS
         *   *  3.1 Hadoop之HDFS
             *   *  3.1.2 初识HDFS
                 *   *  HDFS架构

![在这里插入图片描述][3f180cc8c5c04068a1d210f9888c514b.png_pic_center]

#### 第3章 入门到进阶：系统玩转分布式文件系统HDFS ####

##### 3.1 Hadoop之HDFS #####

> 1.  初识HDFS
> 2.  HDFS假设和目标
> 3.  HDFS架构
> 4.  文件系统命名空间
> 5.  副本
> 6.  HDFS优缺点
> 7.  单节点HDFS部署
> 8.  HDFS命令行使用
> 9.  HDFS Java API使用
> 10. HDFS读写数据流程
> 11. 工作机制
> 12. 安全模式

###### 3.1.2 初识HDFS ######

[https://hadoop.apache.org/][https_hadoop.apache.org]

![在这里插入图片描述][0a02bacf21d7473595bb10ffd341c345.png_pic_center]

Getting started！

[https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html][https_hadoop.apache.org_docs_stable_hadoop-project-dist_hadoop-hdfs_HdfsDesign.html]

![在这里插入图片描述][552b355ab3274704844e95288f819838.png_pic_center]

###### HDFS架构 ######

【1】介绍

Hadoop 分布式文件系统 (HDFS) 是一种分布式文件系统，旨在在商用硬件上运行。它与现有的分布式文件系统有很多相似之处。然而，与其他分布式文件系统的区别是显着的。

HDFS 具有高度容错性，旨在部署在低成本硬件上。HDFS 提供对应用程序数据的高吞吐量访问，适用于具有大型数据集的应用程序。HDFS 放宽了一些 POSIX 要求以启用对文件系统数据的流式访问【不是流式计算，是流式数据】。HDFS 最初是作为 Apache Nutch 网络搜索引擎项目的基础设施构建的。HDFS 是 Apache Hadoop Core 项目的一部分。

![在这里插入图片描述][c5eb812ef0ed41c881ccd33ef47f30d9.png_pic_center]

HDFS: Hadoop Distributed File System【四个单词，记清楚了】【Hadoop分布式文件系统】

*  运行在commodity hardware(廉价)的机器
 *  fault-tolerant【容错】：分布式框架中必备【跑着跑着没(挂)了，就很不像话了】

[3f180cc8c5c04068a1d210f9888c514b.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/a914b25a27214a88a6c8895676365b3a.png
[https_hadoop.apache.org]: https://hadoop.apache.org/
[0a02bacf21d7473595bb10ffd341c345.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/66606afe4f6241cea0528bc70716a666.png
[https_hadoop.apache.org_docs_stable_hadoop-project-dist_hadoop-hdfs_HdfsDesign.html]: https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html
[552b355ab3274704844e95288f819838.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/75d52b21034d41708299b689a5c92e40.png
[c5eb812ef0ed41c881ccd33ef47f30d9.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/3448a32135d34552bbec251c3e24747e.png