-
-
[原创]一次centos内核配置参数tcp_tw_recycle和tcp_timestamps引发的问题
-
发表于: 2019-9-20 17:27
-
大致网络拓扑如下：
业务刚上线，数据量不大，一直运行平稳未发现任何异常情况，直到智博会该系统拿到会场展示，访问量暴增，问题就出现了。
下午开始出现大量用户不能正常访问接口服务，部分业务瘫痪，搞得老夫头皮发麻，开始一系列紧张的排查：
首先排查业务日志，无任何报错现象，ZABBIX监控无异常，排查NGINX的access日志，没有发现大量访问日志，至此基本可以认定，业务访问请求报文还没到达nginx就已经被抛弃。
后续抓包也证明了果然如此，tcpdump抓包如下
Tcp握手全部失败，马上开始百度,谷歌查询问题，最后发现与sysctl.conf中2个参数有关：
修改前net.ipv4.tcp_timestamps的配置为1
按照网上所说改为0，问题立即解决。
为深入分析原因，下载对应版本的内核源码看了下
找到内核处理TCP连接函数：tcp_v4_conn_request，对于该设置的处理流程如下：
[培训]内核驱动高级班，冲击BAT一流互联网大厂工作，每周日13:00-18:00直播授课
|
|
|---|---|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
哦·· 这玩意~~上头是F5做的负载均衡网关~ 当时不记得是为啥做了些骚操作~~ 后面网络结构做了调整，现在才好了~ |
