孤独酒馆|6000+字，30+张图。JAVA线上故障排查全套路总结( 七 ) fredalxin|线上故障主要会包括cpu、磁

接下来我们通过wireshark打开抓到的包，可能就能看到如下图所示，红色的就表示RST包了。
TIME_WAIT和CLOSE_WAITTIME_WAIT和CLOSE_WAIT是啥意思相信大家都知道。在线上时，我们可以直接用命令netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'来查看time-wait和close_wait的数量
用ss命令会更快ss -ant | awk '{++S[$1]} END {for(a in S) print a, S[a]}'
img
TIME_WAITtime_wait的存在一是为了丢失的数据包被后面连接复用，二是为了在2MSL的时间范围内正常关闭连接。它的存在其实会大大减少RST包的出现。
过多的time_wait在短连接频繁的场景比较容易出现。这种情况可以在服务端做一些内核参数调优:
#表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接，默认为0 ，表示关闭net.ipv4.tcp_tw_reuse = 1#表示开启TCP连接中TIME-WAIT sockets的快速回收，默认为0 ，表示关闭net.ipv4.tcp_tw_recycle = 1当然我们不要忘记在NAT环境下因为时间戳错乱导致数据包被拒绝的坑了，另外的办法就是改小tcp_max_tw_buckets ，超过这个数的time_wait都会被干掉，不过这也会导致报time wait bucket table overflow的错。
CLOSE_WAITclose_wait往往都是因为应用程序写的有问题，没有在ACK后再次发起FIN报文。 close_wait出现的概率甚至比time_wait要更高，后果也更严重。往往是由于某个地方阻塞住了，没有正常关闭连接，从而渐渐地消耗完所有的线程。
想要定位这类问题，最好是通过jstack来分析线程堆栈来排查问题，具体可参考上述章节。这里仅举一个例子。
开发同学说应用上线后CLOSE_WAIT就一直增多，直到挂掉为止， jstack后找到比较可疑的堆栈是大部分线程都卡在了countdownlatch.await方法，找开发同学了解后得知使用了多线程但是确没有catch异常，修改后发现异常仅仅是最简单的升级sdk后常出现的class not found 。

孤独酒馆|6000+字，30+张图。JAVA线上故障排查全套路总结( 七 )

推荐阅读

波音737MAX复飞时间再推迟飞行训练模拟器难预订

法国官方确诊病例突破22万例聚集性感染病例持续增加

影视怪蜀黍陈瑶白衣似雪仙气飘飘，造型撞上“白浅”，《皓衣行》最新路透图

海外资金|A股中具有潜力的21只生物疫苗股（名单），外资持股均超百万股

『小八讲历史』但依然想要靠自己的四大生肖，虽是富二代

安福双的新三板研究新三板半导体之设备：大国重器

大学毕业一年了，想从头学习做一名医生，现在还来得及吗

想要做好酱牛肉，不能只会下锅炖，要做好3点，酱牛肉才能做好吃

明星游戏学学学|求贤令，微博设计美学、NGA玩家社区、考虫雅思招聘新媒体人才啦！|

吾说：宋茜点评超专业，教练团初评级录制亮点多，代班教练大张伟话太密

汽车|能力“钞”强！长安神骐PLUS正式上市：5.89万元起

『人间观止』包工头拿钱感谢遭拒，结果帮老人装修新房，故事：老人工地捡20万元归还

若影寒▲为何从未被吃掉？答案就藏在帽子里，你看看是啥，唐僧被妖怪抓走

经武娱乐|违者罚款，严重入刑农民要避免，注意农村全面禁种5类植物

情感一姐|他丝毫不嫌弃，孩子出生后他给我60万，跟老公结婚我怀前男友骨肉

央视新闻客户端|伊朗革命卫队海军司令：伊朗有能力完全掌控霍尔木兹海峡

「李存孝」唐朝的第一猛将，死后的坟墓无人敢动，为什么盗墓贼路过也要绕道而行？

水平|他舌战群儒群僧，坚持真理而不为世俗所绕，辩论水平那不是一般的高

怎样让爹妈不吃发霉的东西

海口新闻联播互联网产业保持高速增长，复兴城园区：化“危”为“机”