netty百万连接跟踪记录

爱被打了一巴掌 2022-01-10 04:43 351阅读 0赞

0、 启动客户端和服务端

# 测试环境: centos7 jdk8 2核16G
# 服务端启动
nohup java -Xmx8192m -Xms4096m -XX:+UseG1GC -XX:ParallelGCThreads=4 -jar SJJ1748PerformanceTest-1.0.jar 10000 K1 &

1、 too many openFiles 服务端和测试机都改一下

# 进程最大文件打开添加参数最大限制
vi /etc/security/limits.conf
* soft nofile 1000000
* hard nofile 1000000

1358661-20190527185937897-1708502069.png

1358661-20190527185950069-33366675.png

# 全局限制 cat /proc/sys/fs/file-nr
echo 1200000 > /proc/sys/fs/file-max

2、 客户端问题汇总

# 客户机开不了这么多连接 ,可能的问题原因端口开放数
linux对外随机分配的端口是有限制,理论上单机对外端口数可达65535,但实际对外可建立的连接默认最大只有28232个
查看: cat /proc/sys/net/ipv4/ip_local_port_range
echo “net.ipv4.ip_local_port_range= 1024 65535”>> /etc/sysctl.conf
sysctl -p

# ipv4设置
sysctl -w net.ipv4.tcp_tw_recycle=1 #快速回收time_wait的连接
sysctl -w net.ipv4.tcp_tw_reuse=1
sysctl -w net.ipv4.tcp_timestamps=1

1358661-20190527190103942-1212053138.png

3.可能的问题

# 如果发现自己的用例跑不上去,就看看linux日志
linux 日志
nf_conntrack: table full, dropping packet 表示防火墙的表满了,加大 nf_conntrack_max 参数
echo “net.nf_conntrack_max = 1000000”>> /etc/sysctl.conf

# 2、 TCP: too many orphaned sockets 表示内存不太够,拒绝分配,一般就是TCP缓冲区内存不够用,调大一点
# cat /proc/sys/net/ipv4/tcp_mem
echo “net.ipv4.tcp_mem = 786432 2097152 16777216”>> /etc/sysctl.conf
echo “net.ipv4.tcp_rmem = 4096 4096 16777216”>> /etc/sysctl.conf
echo “net.ipv4.tcp_wmem = 4096 4096 16777216”>> /etc/sysctl.conf
sysctl -p

1358661-20190527190208949-502601602.png

4、 常规监控

# 查看某个端口的连接情况
netstat -nat|grep -i “$(jcmd|grep SJJ|awk ‘{print $1}‘)”|wc -l

1358661-20190527190237592-547421180.png

netstat -n | awk ‘/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}‘

1358661-20190527190307488-2027465702.png

# 网络接口的带宽使用情况
# glances工具
yum install -y glances
glances 控制台查看
glances -s 服务器模式查看

1358661-20190527190334259-859023032.png

转载于:https://www.cnblogs.com/htkj/p/10932461.html

发表评论

表情:
评论列表 (有 0 条评论,351人围观)

还没有评论,来说两句吧...

相关阅读

    相关 Netty如何做到单机并发?

    相信很多人知道石中剑这个典故,在此典故中,天命注定的亚瑟很容易的就拔出了这把石中剑,但是由于资历不被其他人认可,所以他颇费了一番周折才成为了真正意义上的英格兰全境之王,亚瑟王。