tcp连接数怎么调?先分清文件句柄、内核参数和连接队列
TCP 连接数调不上去,通常不是改一个参数就能解决。
需要先确认瓶颈在哪一层:是单个进程的文件句柄不够,是内核连接跟踪表满了,还是监听队列太短导致新连接被丢弃。
下面按从进程到内核的顺序给出调整方法。
先确认瓶颈在哪一层
登录服务器后,先用几条命令看当前状态,不要上来就改配置。
查看当前进程打开的文件句柄数:
cat /proc/sys/fs/file-nr
输出三个数字,第三个是系统级已分配文件句柄数。
再看单个进程的限制:
ulimit -n
如果这个值只有 1024,高并发服务肯定不够。
接着看连接跟踪表:
cat /proc/sys/net/netfilter/nf_conntrack_count
cat /proc/sys/net/netfilter/nf_conntrack_max
当 count 接近 max 时,新连接可能被丢弃,表现为间歇性超时。
最后看监听队列是否溢出:
ss -lnt
关注 Send-Q 列,如果它持续大于 Recv-Q,说明 accept 队列积压,需要调大 somaxconn 和 tcp_max_syn_backlog。
调整文件句柄限制
文件句柄分临时和永久两种改法。
临时只对当前 shell 生效,适合测试:
ulimit -n 65535
永久生效要改两个文件。
编辑 /etc/security/limits.conf,在末尾加入:
* soft nofile 65535
* hard nofile 65535
如果系统使用 systemd 管理服务,还要改服务单元或全局配置。
编辑 /etc/systemd/system.conf:
DefaultLimitNOFILE=65535
改完后执行 systemctl daemon-reexec 让 systemd 重新加载。
注意:已经运行的服务需要重启才会继承新限制,可以用 cat /proc/$(pidof nginx)/limits | grep 'open files' 验证。
内核参数怎么改
连接数相关的主要是这几个参数,写入 /etc/sysctl.d/99-tcp.conf:
net.core.somaxconn = 65535
net.ipv4.tcp_max_syn_backlog = 65535
net.netfilter.nf_conntrack_max = 262144
net.ipv4.ip_local_port_range = 1024 65000
somaxconn 控制 accept 队列长度,tcp_max_syn_backlog 控制 SYN 队列长度,nf_conntrack_max 控制连接跟踪表上限,ip_local_port_range 控制主动连接可用的本地端口范围。
执行加载:
sysctl -p /etc/sysctl.d/99-tcp.conf
如果提示 nf_conntrack_max 不存在,说明系统没有加载连接跟踪模块,需要先执行 modprobe nf_conntrack。
容易踩的坑
只改 ulimit 不改 systemd,服务重启后限制又回到默认值。
改完 limits.conf 后,SSH 重新登录才能看到新限制,但 systemd 服务不受登录会话影响。
调大 nf_conntrack_max 会增加内存占用,每条连接跟踪记录大约几百字节,26 万条记录通常占用几十 MB,内存小的机器要算一下余量。
ip_local_port_range 不要设得太宽,低端口可能被系统服务占用,建议从 1024 起,上限不超过 65000。
验证调整结果
重新登录后执行 ulimit -n,应显示 65535。
用 sysctl net.core.somaxconn 确认内核参数已生效。
压测或业务高峰时观察 nf_conntrack_count 是否稳定低于 nf_conntrack_max 的 80%。
用 ss -s 查看连接总数和 TIME_WAIT 数量,如果 TIME_WAIT 过多,可以再评估是否开启 tcp_tw_reuse,但不要在生产环境随意开启 tcp_tw_recycle,该参数在较新内核中已被移除。
改完参数后建议重启一次业务服务,确认新连接能正常建立,再观察一天的错误日志和监控曲线。