执行stop-dfs.sh后无法停止hadoop集群【hadoop】

今天药忘吃喽~ 2022-04-17 03:51 360阅读 0赞

### 错误情况： ###

Stopping namenodes on [master]
    master: no namenode to stop
    slave1: no datanode to stop
    slave2: no datanode to stop
    slave3: no datanode to stop
    Stopping secondary namenodes

### 3. 原因分析 ###

执行stop-dfs.sh后，会依次执行hadoop-daemons.sh > hadoop-daemon.sh脚本，然后定位到“no $command to stop”
    发现脚本会在$HADOOP_PID_DIR目录里面查找hadoop-$HADOOP_IDENT_STRING-$command.pid文件，
    $HADOOP_PID_DIR目录默认是/tmp目录，$HADOOP_IDENT_STRING默认是启动Hadoop的用户名$USER，$command是
    你要停止的节点类型，例如namenode、datanode或secondarynamenode。所以本例的pid文件名是
    ：hadoop-hdfs-namenode.pid、hadoop-hdfs-secondarynamenode.pid、hadoop-hdfs-datanode.pid。

因为根据linux的tmpwatch，默认在30天内文件不被访问的情况下就会被清理，所以导致找不到上述的pid文件，
    因此无法停止namenodes、datanodes和secondary namenodes。

### 解决方法 ###

使用ps命令查找正在运行的namenodes、datanodes和secondary namenodes的pid，然后在/tmp目录创建对应的pid文件，重新执行stop-dfs.sh脚本，一切正常！或者可以直接运行kill -9命令把对应的pid进程杀掉。下次重新启动hdfs之前建议修改$HADOOP\_PID\_DIR目录，否则的话那些pid文件还是会被tmpwatch清理。

### 参考博客 ###

[博客地址1][1]

[1]: https://blog.csdn.net/gangchengzhong/article/details/69525048

发表评论取消回复

表情：

评论列表（有 0 条评论，360人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop篇：Hadoop集群安装

规划在搭建Hadoop集群前，我们肯定需要先规划一下集群的各个节点安装的组件。如果你是伪分布式或单机模式，则不需要遵循任何规则，可以随意安装各个组件。如果你是完全分布式

左手的ㄟ右手/ 2024年03月16日 19:11/ 0 赞/ 66 阅读

相关 Hadoop集群配置

一：集群部署规划注意： ➢ NameNode和SecondaryNameNode不要安装在同一台服务器 ➢ ResourceManager也很消耗内存，不要和Nam

r囧r小猫/ 2023年09月28日 04:30/ 0 赞/ 11 阅读

相关 Hadoop-启动集群

文章目录启动集群 1. 自定义配置集群 2. 启动集群 3. 测试 4

ゝ一世哀愁。/ 2022年11月08日 11:29/ 0 赞/ 248 阅读

相关 Hadoop集群配置

1.在进行Hadoop集群配置中，需要在/etc/hosts文件中添加集群中所有机器的IP与主机名，这样Master与所有的Slave机器之间不仅可以通过IP进行通信，还可以通

桃扇骨/ 2022年08月07日 05:35/ 0 赞/ 233 阅读

相关 (16)hadoop 集群重启与停止

Once all the necessary configuration is complete, distribute the files to the HADOOP\_CO

冷不防/ 2022年06月17日 13:43/ 0 赞/ 396 阅读

相关 Hadoop高性能集群

一：概述 hadoop是一个由apache基金会所开发的分布式系统基础架构，利用集群进行高速运算和存储。 hadoop的框架最核心的设计就是：HDFS和MapReduce.

约定不等于承诺〃/ 2022年05月14日 02:39/ 0 赞/ 207 阅读

相关执行stop-dfs.sh后无法停止hadoop集群【hadoop】

错误情况： Stopping namenodes on [master] master: no namenode to stop slave1:

今天药忘吃喽~/ 2022年04月17日 03:51/ 0 赞/ 361 阅读

相关 hadoop集群设置

Hadoop Cluster Setup hadoop集群设置目的本文档描述了如何安装和配置Hadoop集群，范围从几个节点到具有数千个节点的超大集群。要

缺乏、安全感/ 2022年03月31日 06:30/ 0 赞/ 280 阅读

相关 Hadoop 集群群起

文章目录配置 slaves 启动 HDFS 启动 Yarn 查看停止 <table> <th

矫情吗；*/ 2022年02月25日 01:30/ 0 赞/ 262 阅读

相关 Hadoop 集群配置

文章目录集群部署规划配置核心配置文件 hdfs 配置文件 hadoo

爱被打了一巴掌/ 2022年02月25日 01:26/ 0 赞/ 288 阅读