ssh进不去问题

矫情吗；* 2022-05-30 01:43 247阅读 0赞

排查路径：

1、一开始怀疑可能是io阻塞导致，于是使用iostat -xdm 1 100，查看 io状况，发现io不高

![image2017-11-29 19:57:48.png][image2017-11-29 19_57_48.png]

2、于是使用top，查看系统负载情况。发现系统负载很高，但是cpu使用率比较低，同时wa也不多，难道是正在执行的进程数很多。

![Center][]

3、另起一个窗口 执行 vmstat 1 10 查看系统状态，没有发现异常，于是怀疑是不是进程D状态导致。

![Center 1][]

4、于是free -g 查看内存使用情况，发现free的内存为0，但是buff/cache还有13G

5、使用ps -ef 查看有哪些进程，结果 ps -ef 显示到一半就直接hung死了。

6、于是执行ps aux，没有执行完成时，也hung死了，这时发现有很多D状态的进程，这就很恐怖了，为什么这么多D状态的进程。

7、于是查看/var/log/message，发现大量的call\_trace, 依次是kthread kspwad java java java, 后面都是大量的java oom

![Center 2][]

看调用链，系统内存不足了，在回写数据。

从内存不足、磁盘IO多这两个方面考虑

根据下图红框中的函数：在申请内存，回收cache 中的object，刷cache object的过程当中，就bug了。。

![Center 3][]

从top的截图来看：可用内存只有251M了

![Center 4][]

根据free –g,如下图：表明系统空闲内存少于1个G，

![Center 5][]

根据下图：RES是进程使用的实际物理内存，图中显示：0.023t \* 1024 = 23.552G     java大概占用了23G的内存，在加上buff/cache。基本没有多余的内存了。

![Center 6][]

总结：由于内存不足，导致java进程的mmap操作的物理内存需求无法得到满足，连带负责内核内存管理、数据回写的内核线程进程D状态，进而导致load飙升。

l  Java占用内存：23552M(23G)，在获取内存时，由于无法立刻得到满足，进入D状态；

l  日志里的oops里的函数表明，系统在偿试申请存页、回收cache object，并且由于某些条件不满足，导致D状态；

l  Top的load值是负载最高的cpu核心上的队列大小为基准计算的，包括了D状态的进程（TASK\_UNINTERRUPTIBLE）

[image2017-11-29 19_57_48.png]: /images/20220530/9f2498b4231245da85e287b690273070.png
[Center]: /images/20220530/72a1b7b43d6b4d178ec514761ec738e6.png
[Center 1]: /images/20220530/3d600ca4156748129ee80a0bf176c9e6.png
[Center 2]: /images/20220530/94caef8af96742879d4e415be9bcd823.png
[Center 3]: /images/20220530/fdb811458b3542e38f00efda1334d841.png
[Center 4]: /images/20220530/d6b5e98a2260480db571b7325b9f3db2.png
[Center 5]: /images/20220530/4c16695be4804ac096640b822e0767f0.png
[Center 6]: /images/20220530/1b3dfde6999c4f19ad73668fa9e89f48.png

发表评论取消回复

表情：

评论列表（有 0 条评论，247人围观）

还没有评论，来说两句吧...

相关阅读

相关 ubuntu18登录后输密码循环进不去问题处理

首先确认你自己密码没有输入错，按下ctrl+alt+F2，进入命令行模式，用你的账号密码登录登录进去后，查看当前目录下的 .xsession-errors 文

r囧r小猫/ 2023年01月17日 13:53/ 0 赞/ 228 阅读

相关重启电脑进不去grub 模式

惠普电脑 ubuntu 18.04 进入recovery mode的方法： ctrl + alt + delete 重启电脑，长按F9 进入 Boot Menu ,选择

爱被打了一巴掌/ 2023年01月17日 09:24/ 0 赞/ 197 阅读

相关 pycharm进不去

问题：pycharm卡在进入界面动画，任务管理器中应用没有显示出来，而进程中有，但是磁盘调用显示百分之0，cpu也没占用。除去网上解决方案，如下： 1、卸载其他程序，

心已赠人/ 2023年01月11日 03:44/ 0 赞/ 204 阅读

相关 Idea官网进不去，解决办法

配置dns ![2021092409221488.png][] ![watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_tex

电玩女神/ 2022年09月12日 10:43/ 0 赞/ 331 阅读

相关 Eclipse 未正常退出,导致进不去的问题

打开eclipse的工作空间目录workspace，然后一层一层进入下面的目录 .metadata .plugins org.eclipse.core.reso

喜欢ヅ旅行/ 2022年08月13日 03:00/ 0 赞/ 269 阅读

相关 ssh进不去问题

排查路径： 1、一开始怀疑可能是io阻塞导致，于是使用iostat -xdm 1 100，查看 io状况，发现io不高 ![image2017-11-29 19:57:48

矫情吗；*/ 2022年05月30日 01:43/ 0 赞/ 248 阅读

相关关于进不去localhost:8888的问题

localhost的端口号默认为8080，当使用eclipse时会默认使用eclipse的server.xml文件覆盖tomcat的server.xml。导致之前设置的8888

￡神魔★判官ぃ/ 2022年05月22日 12:17/ 0 赞/ 948 阅读

相关 debug断点调试进不去

1.首先确定程序和开发工具没问题，我就遇到过eclipse的问题导致进不去；这种情况一：重启eclispse，清缓存；

系统管理员/ 2022年05月17日 03:58/ 0 赞/ 963 阅读

相关 centos7安装进不去界面

在用U盘安装centos7时，我们需要修改镜像位置：选择第一项：Install CentOS 7 ，按 e（也有可能是tab键）键进入编辑界面。将 vmlinuz in

谁借莪１个温暖的怀抱￠/ 2022年04月03日 09:54/ 0 赞/ 376 阅读

相关解决debug代码进不去的坑

今天遇到了一个很奇葩的事情，debug打的断点老是进不去，接口路径什么的没有错误。搞了好久没有找到原因，网上的原因说的也不符合自己的情况，问了下实习的导师的，原来这么简单。

清疚/ 2022年03月29日 03:07/ 0 赞/ 988 阅读