TIME_WAIT 상태가 많은 것은 연결을 많이 맺고 끊을 때 생기는 정상 현상입니다. /proc/sys/net/ipv4/tcp_fin_timeout 값을 줄이는 방법이 있지만 효과는 제한적이니, 먼저 연결 수를 줄이는 설정이나 keepalive 를 확인하세요.