一个超时排查


架构

nginx + 若干内网tomcat + 若干出口服务器

表现:

突然某些流量超时严重

排查:

发现是某一个出口代理服务器流量激增,导致超时。

排查发现该服务器TCP连接个数异常,与流量波动严重不符。

正常情况下应该是1000左右。

最终将出口IP从联通换成电信就解决了。(条件所限,没有BGP的IP了)