解决Too many open files问题

ゞ浴缸里的玫瑰 2022-06-15 05:55 167阅读 0赞

当用linux做高并发服务器时，会遇到"Too many open files"的错误。

Linux是有文件句柄限制的（open files），而且Linux默认不是很高，一般都是1024，做高并发生产服务器用其实很容易就达到这个数量。

在linux中执行ulimit -a 即可查询linux相关的参数，如下所示：

ulimit -a
    core file size          (blocks, -c) unlimited
    data seg size           (kbytes, -d) unlimited
    scheduling priority             (-e) 0
    file size               (blocks, -f) unlimited
    pending signals                 (-i) 63470
    max locked memory       (kbytes, -l) 64
    max memory size         (kbytes, -m) unlimited
    open files                      (-n) 1024
    pipe size            (512 bytes, -p) 8
    POSIX message queues     (bytes, -q) 819200
    real-time priority              (-r) 0
    stack size              (kbytes, -s) 8192
    cpu time               (seconds, -t) unlimited
    max user processes              (-u) 102400
    virtual memory          (kbytes, -v) unlimited
    file locks                      (-x) unlimited

用ulimit命令是可以修改这些配置的

命令的格式：ulimit \[-SHacdefilmnpqrstuvx\] \[limit\]

中间的参数对应这要修改的项目。

默认最大打开文件数（open files）最大数为1024，修改：

ulimit -n 102400

最大值为655350

命令参数：

-H 设置硬件资源限制.
    -S 设置软件资源限制.
    -a 显示当前所有的资源限制.
    -c size:设置core文件的最大值.单位:blocks
    -d size:设置数据段的最大值.单位:kbytes
    -f size:设置创建文件的最大值.单位:blocks
    -l size:设置在内存中锁定进程的最大值.单位:kbytes
    -m size:设置可以使用的常驻内存的最大值.单位:kbytes
    -n size:设置内核可以同时打开的文件描述符的最大值.单位:n
    -p size:设置管道缓冲区的最大值.单位:kbytes
    -s size:设置堆栈的最大值.单位:kbytes
    -t size:设置CPU使用时间的最大上限.单位:seconds
    -v size:设置虚拟内存的最大值.单位:kbytes
    unlimited 是一个特殊值，用于表示不限制

ulimit命令的特点：

1.只对当前tty（终端有效），若要每次都生效的话，可以把ulimit参数放到对应用户的.bash\_profile里面；  
2.ulimit命令本身就有分软硬设置，加-H就是硬，加-S就是软；  
硬限制是可以在任何时候任何进程中设置  但硬限制只能由超级用户提起  
软限制是内核实际执行的限制，任何进程都可以将软限制设置为任意小于等于对进程限制的硬限制的值  
3.默认显示的是软限制，如果运行ulimit命令修改的时候没有加上的话，就是两个参数一起改变生效；

永久设置  
  
  
针对所有用户的设置，在/etc/security/limits.conf文件，其是可以对系统用户、组进行cpu、文件数等限制的，通过它可以针对某个用户或全部进行限制。但不能超越系统的限制；  
格式：  
\#<domain>   <type> <item><value>  
\*           soft   nproc        102400  
  
  
domain:表示范围，  
a user name       \#表示某个用户  
a group name  \#表示某个组  
the wildcard \*    \#表示所有用户  
the wildcard %    \#筛选过滤用户  
  
  
type:表示类型  
soft表示可以超出，但只是警告  
hard表示绝对不能超出  
  
  
item:  
\- core - limits the core file size (KB)  
\- data - max data size (KB)  
\- fsize - maximum filesize (KB)  
\- memlock - max locked-in-memory address space (KB)  
\- nofile - max number of open file descriptors  
\- rss - max resident set size (KB)  
\- stack - max stack size (KB)  
\- cpu - max CPU time (MIN)  
\- nproc - max number of processes  
\- as - address space limit (KB)  
\- maxlogins - max number of logins for this user  
\- maxsyslogins - max number of logins on the system  
\- priority - the priority to run user process with  
\- locks - max number of file locks the user can hold  
\- sigpending - max number of pending signals  
\- msgqueue - max memory used by POSIX message queues (bytes)  
\- nice - max nice priority allowed to raise to values: \[-20, 19\]  
\- rtprio - max realtime priority  
  
  
value:  
unlimited表示不限制  
  
  
如果想对所有用户设置，也可以放在/etc/profile文件里面，下面是该文件里面的默认参数：  
ulimit -S -c 0 > /dev/null 2>&1

参考：[http://www.jianshu.com/p/23ee9db2a620][http_www.jianshu.com_p_23ee9db2a620]

[http_www.jianshu.com_p_23ee9db2a620]: http://www.jianshu.com/p/23ee9db2a620