近期伺服器出現大量time_wait的TCP連線造成伺服器連線數過多而最終導致tomcat假死狀態。連線伺服器檢視連線數的時候提示如下。

[[email protected] apache-tomcat-7.0.53]# netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' 
TIME_WAIT 14434
FIN_WAIT2 6
ESTABLISHED 133

用的時候連接回收還是較慢。通過java API解決這個問題的路子就堵死了。

後來去伺服器查閱了大量資料，可以考慮通過修改linux核心的方式解決此處問題。解決方法如下：

vi /etc/sysctl.conf

新增配置資訊

#對於一個新建連線，核心要傳送多少個 SYN 連線請求才決定放棄,不應該大於255，預設值是5，對應於180秒左右時間
net.ipv4.tcp_syn_retries=2
#net.ipv4.tcp_synack_retries=2


#表示當keepalive起用的時候，TCP傳送keepalive訊息的頻度。預設是2小時，改為300秒
net.ipv4.tcp_keepalive_time=1200
net.ipv4.tcp_orphan_retries=3


#表示SYN佇列的長度，預設為1024，加大佇列長度為8192，可以容納更多等待連線的網路連線數。
net.ipv4.tcp_max_syn_backlog = 4096


#表示開啟SYN Cookies。當出現SYN等待佇列溢位時，啟用cookies來處理，可防範少量SYN攻擊。預設為0，表示關閉
net.ipv4.tcp_syncookies = 1
#表示開啟重用tcp連線。允許將TIME-WAIT sockets重新用於新的TCP連線。預設為0，表示關閉
net.ipv4.tcp_tw_reuse = 1
#表示開啟TCP連線中TIME-WAIT sockets的快速回收。預設為0，表示關閉
net.ipv4.tcp_tw_recycle = 1
#表示如果套接字由本端要求關閉，這個引數決定了它保持在FIN-WAIT-2狀態的時間
net.ipv4.tcp_fin_timeout = 30


##減少超時前的探測次數
net.ipv4.tcp_keepalive_probes=5
##優化網路裝置接收佇列
net.core.netdev_max_backlog=3000
 

/sbin/sysctl -p

問題完美解決：

[[email protected] apache-tomcat-7.0.53]# netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' 
TIME_WAIT 96
FIN_WAIT2 3
ESTABLISHED 141