长连接传输不稳,多数情况不是应用代码写错了,而是内核里保活、重传、缓冲、队列这几组参数还停留在通用默认值上,按业务场景把它们对齐,掉线和抖动通常会明显收敛。
这事儿的难点不在”会不会改”,而在”改哪几个、改成多少”,照抄网上那套 net.ipv4.tcp_tw_reuse=1 的模板,往往既解决不了问题,还可能引入新麻烦,下面按”定位分档取值验证”的顺序讲清楚。
长连接到底断在哪儿:三个最常见的现场
在动参数之前,先确认掉线的真实原因,长连接”假在线”的典型特征,是应用层写入没有立刻报错,等到下一次写才收到 RST 或超时。
NAT 或防火墙把空闲连接静默回收
云环境的 SLB、NAT 网关、企业防火墙普遍会对”长时间无数据”的会话做表项老化,老化时通常不发 RST,两端都以为连接还在,业内共识认为,这类静默回收是长连接掉线最主要的来源之一。
快速确认:
ss -tanp | grep ESTAB | wc -l # 当前ESTAB数量 ss -tano state established # 带定时器信息,看keepalive剩余时间 dmesg | grep -i conntrack # 连接跟踪表溢出
重传退避把一条死连接拖了十几分钟
net.ipv4.tcp_retries2 默认是 15 次,按指数退避算下来,一条已经断掉的连接可能十几分钟才被判定失败,这期间应用一直往里写,用户侧看到的就是”卡住不动”。
nstat -az | grep -i retrans netstat -s | grep -i retransmit
重传计数持续上涨而吞吐不涨,基本可以锁定这条链路。
队列和文件句柄先到顶
somaxconn、tcp_max_syn_backlog 太小,新连接进不来;nofile 不够,长连接数量上不去就报 Too many open files,这类问题表现为”连接数卡在某个固定值附近”,很好识别。
Linux TCP 长连接优化参数怎么调:按四组能力分档
别一上来就改几十个值,把参数按能力分成四组,一组一组调、一组一组验证,出了问题也容易回滚。
保活组:让内核替你发现”对面已经没了”
net.ipv4.tcp_keepalive_time = 300 net.ipv4.tcp_keepalive_intvl = 30 net.ipv4.tcp_keepalive_probes = 3
这组值是”300 秒空闲后开始探测,每 30 秒一次,连续 3 次无响应判定断开”,合计约 390 秒感知到故障,默认的 7200 秒对现代业务来说太长了。
有个容易被忽略的前提:内核 keepalive 必须由应用在 socket 上打开 SO_KEEPALIVE 才生效,全局参数只是改了”探测节奏”,不是”自动开启”。
int on = 1; setsockopt(fd, SOL_SOCKET, SO_KEEPALIVE, &on, sizeof(on));
重传组:别让死连接占着资源不放
net.ipv4.tcp_retries2 = 6 net.ipv4.tcp_syn_retries = 4 net.ipv4.tcp_synack_retries = 3 net.ipv4.tcp_orphan_retries = 2
tcp_retries2 从 15 降到 6,失败判定时间从十几分钟收到数十秒量级,对交互型长连接更友好,代价是弱网环境下可能”误杀”,IoT 这类链路质量差的场景要谨慎,可以留在 8 左右。
缓冲与队列组:吞吐塌陷的隐形推手
net.core.somaxconn = 32768 net.ipv4.tcp_max_syn_backlog = 16384 net.core.rmem_max = 16777216 net.core.wmem_max = 16777216 net.ipv4.tcp_rmem = 4096 131072 16777216 net.ipv4.tcp_wmem = 4096 65536 16777216
缓冲区大小要跟带宽时延积(BDP)匹配,举例:10Gbps 链路、30ms RTT,BDP 约为 5MB,这时候接收缓冲上限还停在默认的 6MB,吞吐就上不去。
同时别忽略 tcp_mem,它管的是全系统 TCP 内存页,设置过小会触发主动收包丢弃。
生命周期组:TIME_WAIT 与文件句柄
net.ipv4.tcp_fin_timeout = 15 net.ipv4.tcp_max_tw_buckets = 262144 fs.file-max = 2097152
tcp_tw_reuse 要慎用,它只对”客户端主动发起”的场景有意义,且依赖时间戳,短连接密集的服务可以开,纯长连接服务收益不大。
高并发长连接掉线,tcp_keepalive 设置多少合适
答案取决于链路上”最没耐心的那个设备”,取它的空闲老化时间,再打个折扣。
| 链路场景 | keepalive_time | intvl | probes | 故障感知时长 |
|---|---|---|---|---|
| 内网直连 | 600 | 30 | 3 | 约 11 分钟 |
| 云 SLB / NAT 网关 | 300 | 30 | 3 | 约 6.5 分钟 |
| 移动端 / 弱网 | 120 | 20 | 3 | 约 3 分钟 |
| 跨境或高丢包链路 | 60 | 15 | 5 | 约 2 分钟 |
关键原则有两条:
- 内核 keepalive 的间隔必须小于中间设备的会话老化时间,留出至少 2 倍余量。
- 应用层心跳优先,内核 keepalive 兜底,心跳能带上业务状态,还能顺带触发 NAT 表项刷新;内核探测只在应用层没心跳时才起作用。
两者同时开启不冲突,但不要把心跳周期设得和 keepalive 完全一样,避免同一时刻集中发包。
场景对比:四类业务该怎么选参数
| 业务类型 | 首要目标 | 关键参数 | 取值倾向 |
|---|---|---|---|
| IM / 推送网关 | 快速感知断线 | tcp_keepalive_time、tcp_retries2 | 短探测、低重试 |
| 数据库连接池 | 连接不被中间件回收 | tcp_keepalive_time、应用心跳 | 探测周期小于老化时间 |
| 内网 RPC | 吞吐与延迟 | tcp_rmem/wmem、拥塞控制 | 缓冲对齐 BDP |
| IoT 弱网设备 | 容忍抖动 | tcp_retries2、tcp_orphan_retries | 适度放宽,避免误杀 |
华东机房跨地域长连接稳定性差在哪
同样一套参数,单机房跑得好好的,跨地域部署就开始抖,原因基本集中在两点。
距离带来的 BDP 放大
RTT 从 1ms 变成 30ms,BDP 放大 30 倍,缓冲区没跟上,窗口就成了瓶颈,表现是”带宽明明够,速度却上不去”。
丢包被重传放大
长肥管道上,一个丢包对 CUBIC 的影响远大于局域网,丢包率稍微高一点,吞吐就断崖式下跌。
业内专家指出,跨地域长连接场景下,拥塞控制算法的选择对稳定性的影响,往往比缓冲区调优更直接。
BBR 与 CUBIC 怎么选
net.ipv4.tcp_congestion_control = bbr net.core.default_qdisc = fq
- CUBIC:基于丢包的经典算法,局域网和低丢包链路表现稳定,兼容性最好。
- BBR:基于带宽和 RTT 建模,在有丢包的长肥管道上优势明显,跨地域场景通常表现更好。
切换前先确认内核版本支持,用 sysctl net.ipv4.tcp_available_congestion_control 看可用列表,切换后要观察一段时间的重传率和尾延迟,不要只看平均吞吐。
内核参数调优多少钱:自己动手和外包的成本账
这是很多团队真正纠结的地方,市场上有专门做内核调优的服务商,报价从几千元到数万元不等,取决于连接规模、场景复杂度和是否包含压测验证。
给个判断依据:
- 参数项本身是公开的,几十个 sysctl 值,网上都能查到,核心工作量在”验证”和”灰度”上。
- 有运维能力的团队自己调通常更划算,因为只有自己清楚业务流量模型。
- 外包更适合两种情况:一是全新业务上线前没有基线数据,二是问题已经影响到线上收入、需要快速止损。
不管选哪条路,验收标准要提前定好:掉线率、P99 建连耗时、重传率这三个指标,调优前后都要有对比数据,没有基线就没有说服力。
可直接落地的调优清单
把参数写进独立配置文件,别直接改 /etc/sysctl.conf,方便回滚:
# /etc/sysctl.d/99-tcp-longconn.conf net.ipv4.tcp_keepalive_time = 300 net.ipv4.tcp_keepalive_intvl = 30 net.ipv4.tcp_keepalive_probes = 3 net.ipv4.tcp_retries2 = 6 net.ipv4.tcp_syn_retries = 4 net.ipv4.tcp_fin_timeout = 15 net.core.somaxconn = 32768 net.ipv4.tcp_max_syn_backlog = 16384 net.ipv4.tcp_rmem = 4096 131072 16777216 net.ipv4.tcp_wmem = 4096 65536 16777216 fs.file-max = 2097152
执行顺序建议:
- 先在预发环境应用,
sysctl -p /etc/sysctl.d/99-tcp-longconn.conf生效。 - 用
ss -s和nstat -az采集至少一个完整业务周期(含高峰)的数据。 - 灰度一台生产机器,观察 24 小时,比对掉线率和重传率。
- 确认无回退后逐批推送,保留原配置文件以便快速回滚。
- 同步调整应用侧的
nofile(/etc/security/limits.conf或 systemd 的LimitNOFILE)。
容器环境要注意:tcp_keepalive_ 属于网络命名空间参数,需要容器具备相应权限,或在编排层通过安全上下文注入,否则改了也不生效。
Q&A:TCP 长连接稳定性调优常见问题
问:sysctl 参数都调了,为什么连接还是会断?
先确认应用有没有打开 SO_KEEPALIVE,全局参数只改探测节奏,不负责开启,其次检查链路中间设备SLB 的会话保持时间、防火墙的 TCP 老化时间,这些不归你管但决定上限,最后看是不是容器网络命名空间隔离导致参数没落到实际网卡上。
问:应用层心跳和内核 keepalive 会不会重复,要不要只留一个?
两者作用层级不同,心跳能携带业务语义,还能顺带刷新 NAT 表项,是主力;keepalive 是兜底,心跳卡住或线程阻塞时它还能发现链路已死,建议都开,但周期错开,避免同一时刻集中发包。
问:内核参数调优大概要花多少钱、多久能见效?
自己动手的成本主要是人力,从采集基线到灰度验证,通常需要一到两周;外包服务的市场报价在几千元到数万元区间,见效时间取决于是否定位准确如果根因是中间设备老化而你没发现,改再多内核参数也不会有变化。
把这几十个参数按场景对齐、按灰度验证,长连接的稳定性问题基本能收敛到一个可接受的区间,真正决定成败的,从来不是某个”神奇数值”,而是你有没有把链路各环节的超时时间排成一排、让它们彼此相容。
首发原创文章,作者:王坚,如若转载,请注明出处:https://idctop.com/article/810632.html


