轻松入门大数据第3章入门到进阶：系统玩转分布式文件系统HDFS 3.1 Hadoop之HDFS 3.1.11 HDFS启停(整体和单个)

小鱼儿 2024-03-22 16:16 8阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第3章 入门到进阶：系统玩转分布式文件系统HDFS
         *   *  3.1 Hadoop之HDFS
             *   *  3.1.11 HDFS启停(整体和单个)

![在这里插入图片描述][39fdd9caec0f4bb7b26719c9635c6841.png_pic_center]

#### 第3章 入门到进阶：系统玩转分布式文件系统HDFS ####

##### 3.1 Hadoop之HDFS #####

> 1.  初识HDFS
> 2.  HDFS假设和目标
> 3.  HDFS架构
> 4.  文件系统命名空间
> 5.  副本
> 6.  HDFS优缺点
> 7.  单节点HDFS部署
> 8.  HDFS命令行使用
> 9.  HDFS Java API使用
> 10. HDFS读写数据流程
> 11. 工作机制
> 12. 安全模式

###### 3.1.11 HDFS启停(整体和单个) ######

格式化文件系统：./hdfs namenode -format  
    	切记：第一次时使用【第一次一定要使用】
    	后续你执行了这句话，那么你的HDFS文件系统就被格式化了，数据就丢了

在bin 目录中执行

![在这里插入图片描述][ade787227958451ca335c1363cdcf7db.png_pic_center]

![在这里插入图片描述][e018160ada194912bd84885d0a275ffa.png_pic_center]

看到这句话就OK了【大概意思是存储目录已经被格式化成功】

启动HDFS: ./start-dfs.sh【在sbin 目录下】
    	[hadoop@hadoop000 sbin]$ jps
    	24897 SecondaryNameNode
    	24663 DataNode
    	24491 NameNode
    
    	http://hadoop000:9870
    
    停止HDFS: ./stop-dfs.sh

![在这里插入图片描述][9218537a0e9746b38d5a5d976b55003c.png_pic_center]

老师居然出问题了… 我倒是出来了【记得是3个，NN、DN、SNN，少一个都没对】

看看日志生成没

![在这里插入图片描述][efa571c56dee44d0a527b484ea8d8036.png_pic_center]

没问题，要启动了才会生成日志。

再看看我们那个存储目录

![在这里插入图片描述][a3e409e4e7454735a5909ae4915072bd.png_pic_center]

有东西生成了，之后我们会细说。

停止 `./stop-dfs.sh`

![在这里插入图片描述][820c96da2dc4435385a36de38b0207d0.png_pic_center]

没问题。

这是一下启动，也可以单个单个的启动

单独启动namenode `./hadoop-daemon.sh start namenode`

![在这里插入图片描述][1abe736fc5864b6595d2527bc38afb7f.png_pic_center]

提示我们这种方式已经过时了【但是不是错误】

同样单独启动datanode `./hadoop-daemon.sh start datanode`

![在这里插入图片描述][0bcf1e0c90e4455dbffbb9c5b04b9ade.png_pic_center]

下面我们可以看看UI 界面

9870 端口

那个second 我们就可以不启了

我们可以先配置一下主机名映射，

![在这里插入图片描述][09cc1a47ba0e417294245389bef39ffa.png_pic_center]

注意要用管理员运行记事本

![在这里插入图片描述][2175b5fe66fe49fb95e45676a77a5b4e.png_pic_center]

这样就行了，试试直接访问`hadoop000:9870`

![在这里插入图片描述][b128043d623e403aa1e0bae33491233b.png_pic_center]

妙啊，进来了，简单看看

![在这里插入图片描述][0cdb441cdf484271ad853e7f47bc410d.png_pic_center]

3.3.2 版本的hadoop

![在这里插入图片描述][833131023f904461b7d4d90e79efe926.png_pic_center]

活着的节点有一个

![在这里插入图片描述][dd0dcfcd5785439199631ac9e7faf358.png_pic_center]

这是我们配的那个存储目录

单个停止

![在这里插入图片描述][730dd0f08e8f4218a5f2d92a7b2006de.png_pic_center]

没问题，当然它一直在提示我们这样的命令是过时的，试试它提示那种不过时的，先配置一下环境变量

为了后面使用hadoop命令方便，建议大家把HADOOP_HOME/bin添加到系统环境变量中
    	vi ~/.bash_profile
    		export HADOOP_HOME=/home/hadoop/app/hadoop-3.3.2
    		export PATH=$HADOOP_HOME/bin:$PATH
    	生效方式：
    		source ~/.bash_profile
    		打开一个新的窗口，重新ssh过去

当然笔者这里改的是`/etc/profile`

![在这里插入图片描述][7f3f67e1c6fe412c89a6144b7380cd14.png_pic_center]

![在这里插入图片描述][8e29a95323c14c7e8536fdfb3b4a42e1.png_pic_center]

`hdfs --daemon`

![在这里插入图片描述][004f4f2fb80a4b178930b0e85bc62935.png_pic_center]

没问题，停就是把start 换成stop

![在这里插入图片描述][4e362438f0cd4ab4a2cf637226d4d974.png_pic_center]

OK，没问题，一键式启动`./start-dfs.sh`

![在这里插入图片描述][9f005e83100943a68e200609b4556c51.png_pic_center]

[39fdd9caec0f4bb7b26719c9635c6841.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/838ee19927ce4065a343f3ec06190707.png
[ade787227958451ca335c1363cdcf7db.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/2f9317849ad04eca8aee82e1f8bcdd8b.png
[e018160ada194912bd84885d0a275ffa.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/eb9522559d8f43369b9f82f885dac872.png
[9218537a0e9746b38d5a5d976b55003c.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/5120d2e3d1054c459f72bc84000b5946.png
[efa571c56dee44d0a527b484ea8d8036.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/e3396d54b22b413f9876aaad58623e2c.png
[a3e409e4e7454735a5909ae4915072bd.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/21955722794c4daba06b9ee012a03d96.png
[820c96da2dc4435385a36de38b0207d0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/33955878c6614b1caf0315bd240e4d29.png
[1abe736fc5864b6595d2527bc38afb7f.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/cbddf95e5de44775b559a037dde10157.png
[0bcf1e0c90e4455dbffbb9c5b04b9ade.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/7f46fe18ea174159bf19af2a9873c44d.png
[09cc1a47ba0e417294245389bef39ffa.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/ba74b7dda87b448386fc559b0f948a30.png
[2175b5fe66fe49fb95e45676a77a5b4e.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/d7404658317446a886736d5b39c7e1a4.png
[b128043d623e403aa1e0bae33491233b.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/2e14cfeecc8d499981a2a3d4d4024af1.png
[0cdb441cdf484271ad853e7f47bc410d.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/4da4f6572b1b4af08e1775d49d403ed6.png
[833131023f904461b7d4d90e79efe926.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/22f5390e0882431a87cbb741e743319f.png
[dd0dcfcd5785439199631ac9e7faf358.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/371f4a0b9484470ea036e8dcced0a4a7.png
[730dd0f08e8f4218a5f2d92a7b2006de.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/cbb25f64049f485ab0544abb9a3de267.png
[7f3f67e1c6fe412c89a6144b7380cd14.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/f0ea61f154604630989c170ca768a95a.png
[8e29a95323c14c7e8536fdfb3b4a42e1.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/afffdb71d2e842448dd09458added484.png
[004f4f2fb80a4b178930b0e85bc62935.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/47e1770b83754b5e934e0f00dd954ad5.png
[4e362438f0cd4ab4a2cf637226d4d974.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/8e42619765ed45b5a9554390bc22cb2b.png
[9f005e83100943a68e200609b4556c51.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/22/ff29865da78b4881a36a42fb31e8001f.png