java OOM问题分析排查

末蓝、 2023-10-05 16:18 3阅读 0赞

java服务OOM最常见的原因：

1.  内存分配过小，而正常业务需要使用更大的内存；
2.  某一个对象被频繁申请，确没有释放，内存不断泄露，导致内存耗尽；
3.  某一个资源被不断申请，系统资源耗尽，如：不断创建线程，不断发起网路连接。

## 排查过程： ##

### 1、jmap -heap pid 查看堆内存分配： ###

jmap -heap -pid 确认内存本身是否分配过小，可以看到 新生代、老年代的参数配置。

C:\Users\Lenovo>jmap -heap 19676
    Attaching to process ID 19676, please wait...
    Debugger attached successfully.
    Server compiler detected.
    JVM version is 25.152-b16
    
    using thread-local object allocation.
    Parallel GC with 8 thread(s)
    
    Heap Configuration:
       MinHeapFreeRatio         = 0
       MaxHeapFreeRatio         = 100
       MaxHeapSize              = 4257218560 (4060.0MB)
       NewSize                  = 88604672 (84.5MB)
       MaxNewSize               = 1418723328 (1353.0MB)
       OldSize                  = 177733632 (169.5MB)
       NewRatio                 = 2
       SurvivorRatio            = 8
       MetaspaceSize            = 21807104 (20.796875MB)
       CompressedClassSpaceSize = 1073741824 (1024.0MB)
       MaxMetaspaceSize         = 17592186044415 MB
       G1HeapRegionSize         = 0 (0.0MB)
    
    Heap Usage:
    PS Young Generation
    Eden Space:
       capacity = 127926272 (122.0MB)
       used     = 57173416 (54.524818420410156MB)
       free     = 70752856 (67.47518157958984MB)
       44.69247411509029% used
    From Space:
       capacity = 16252928 (15.5MB)
       used     = 8648808 (8.248146057128906MB)
       free     = 7604120 (7.251853942871094MB)
       53.21384552986391% used
    To Space:
       capacity = 15728640 (15.0MB)
       used     = 0 (0.0MB)
       free     = 15728640 (15.0MB)
       0.0% used
    PS Old Generation
       capacity = 143130624 (136.5MB)
       used     = 18320840 (17.47211456298828MB)
       free     = 124809784 (119.02788543701172MB)
       12.800083928929144% used
    
    18607 interned Strings occupying 2382728 bytes.

### 2、查看该pid下线程对应的系统占用情况： ###

top -Hp pid

### 3、找到最耗内存的对象 ###

> **jmap -histo:live** pid | more

输入命令后，会议表格的形式显示存活的对象信息，并按照所占内存大小排序：

字段分别代表：**实例树、所占内存大小、类名**

C:\Users\Lenovo>jmap -histo:live 19676|more
    
     num     #instances         #bytes  class name
    ----------------------------------------------
       1:         51966        8639472  [C
       2:         50741        1217784  java.lang.String
       3:         10865         956120  java.lang.reflect.Method
       4:          8243         914968  java.lang.Class
       5:         20954         670528  java.util.concurrent.ConcurrentHashMap$Node
       6:         10233         495936  [Ljava.lang.Object;
       7:         13700         438400  java.lang.ref.WeakReference
       8:          9719         388760  java.util.LinkedHashMap$Entry
       9:          4623         350712  [Ljava.util.HashMap$Node;
      10:         10230         327360  java.util.HashMap$Node
      11:          6991         279640  java.lang.ref.SoftReference
      12:          4959         277704  java.util.LinkedHashMap
      13:          1767         257336  [B
      14:          3674         205744  java.beans.MethodDescriptor
      15:         12034         192544  java.lang.Object
      16:          7684         184416  java.beans.MethodRef
      17:           111         183088  [Ljava.util.concurrent.ConcurrentHashMap$Node;
      18:          3220         170120  [I
      19:          7499         168048  [Ljava.lang.Class;
      20:          6986         167664  java.util.ArrayList
      21:          5245         154944  [Ljava.lang.String;
      22:          3232         129280  org.springframework.util.ConcurrentReferenceHashMap$Segment
      23:          3633         116256  java.util.concurrent.locks.ReentrantLock$NonfairSync
      24:          3502         112064  java.lang.ref.ReferenceQueue
      25:           993          95328  org.springframework.beans.GenericTypeAwarePropertyDescriptor
      26:          3232          88440  [Lorg.springframework.util.ConcurrentReferenceHashMap$Reference;
      27:          3474          83376  org.springframework.core.MethodClassKey
      28:          3232          77568  org.springframework.util.ConcurrentReferenceHashMap$ReferenceManager
      29:          1430          68640  java.util.HashMap
      30:           947          68184  java.beans.PropertyDescriptor
      31:          2578          61872  java.util.LinkedList$Node
      32:           743          59440  java.lang.reflect.Constructor
      33:          3504          56064  java.lang.ref.ReferenceQueue$Lock
      34:           981          54936  java.lang.invoke.MemberName
      35:          1358          54320  java.util.TreeMap$Entry
      36:          1682          53824  java.util.LinkedList
      37:           698          50256  org.springframework.core.annotation.AnnotationAttributes
    -- More  --

### 4、测试堆栈溢出： ###

> **jstat -gcutil pid 时间间隔毫秒**

C:\Users\Lenovo>jstat -gcutil 19676 1000
      S0     S1     E      O      M     CCS    YGC     YGCT    FGC    FGCT     GCT
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255
      0.00   0.00   4.90  10.01  94.82  92.16     11    0.073     4    0.182    0.255

>  *  S0(即:from)：幸存1区当前使用比例；
> 
>  *  S1(即:to)：幸存2区当前使用比例；
>  *  Eden：伊甸园区使用比例；
>  *  Old：老年代使用比例；
>  *  MetaSpace：元数据区使用比例；
>  *  CCS：压缩使用比例；
>  *  YGC：年轻代垃圾回收次数；
>  *  YGCT：年轻代垃圾回收时间；
>  *  FGC：老年代垃圾回收次数；
>  *  FGCT：老年代垃圾回收消耗时间；
>  *  GCT：垃圾回收消耗总时间 .

### 5、生成对应的pid的dump文件： ###

**jmap -dump:format=b,file=heap.hprof pid**

C:\Users\Lenovo>jmap -dump:format=b,file=heap.hprof 19676
    Dumping heap to C:\Users\Lenovo\heap.hprof ...
    Heap dump file created

注意：pid对应的项目是哪个用户启动的，就用哪个用户权限生成文件，否则会报错：Unable to open socket file:target process not responding or HotSpot VM not loaded.

### 6、heap.hprof 文件导出用MAT分析，可以用sz导出 ###