Linux下Too many open files問題排查與解決

作者:

Grey

原文地址:

Github

語雀

博客園

Too many open files是Linux系統中常見的錯誤,從字面意思上看就是說程序打開的文件數過多,不過這裏的files不單是文件的意思,也包括打開的通訊鏈接(比如socket),正在監聽的端口等等,所以有時候也可以叫做句柄(handle),這個錯誤通常也可以叫做句柄數超出系統限制。引起的原因就是進程在某個時刻打開了超過系統限制的文件數量以及通訊鏈接數。

通過命令ulimit -a可以查看當前系統設置的最大句柄數是多少

core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 31767
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 1024
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 8192
cpu time               (seconds, -t) unlimited
max user processes              (-u) 31767
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

可以看到,open files的配置是1024,可以通過如下命令將open files增加

ulimit -n 65535

這種修改方式可以臨時把文件打開數量增加到65535,但是系統重啓後這個配置會失效。

還有一種方式是修改系統的配置文件,以Ubuntu爲例,配置文件默認在

/etc/security/limits.conf

在這個配置文件中增加

* soft nofile 65535
* hard nofile 65535

此外,如果用supervisor託管和啓動項目,會遇到這個配置無法生效的問題,原因在於supervisor會默認配置打開的句柄數量是1024,

如果要查看某個進程最大open files,可以通過這個進程的進程號對應的limits查看

cat /proc/進程號/limits

其中有一行是:

Max open files	1024	1024	bytes

supervisor託管的程序這一行默認都是supervisor配置的最大數量1024,這時需要手動改一下supervisor的配置文件,修改方式如下,以Ubuntu系統爲例,找到supervisor的配置文件supervisord.conf

在[supervisord]選項中,增加minfds選項的配置

[supervisord]
minfds=65535                  ; min. avail startup file descriptors; default 1024

配置完畢後,需要重啓supervisor(以systemctl爲例)

systemctl restart supervisor

即可生效

在通過:

cat /proc/進程號/limits

查看下對應進程的可open files的數量

Max open files	65535	65535	bytes
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章