HAProxy L6, L4 timeouty

Dobry den, aktualne resim problem, kdy mi HAProxy od pulnoci zacne oznacovat mnoho backendu za down z duvodu timeoutu na L6 a L4 vrstve. V tuto chvili name bezi na infra nekolik ruznych jobu.

Snazim se zjitit, jestli je bottleneckem primo HAProxy (mam podezreni ze ano). Koukal jsem na zpotrebovane resources v tomto case jako CPU, RAM, swap a vsechno vypada v poradku - je tam nejaky peak ale nic zasadniho.

Koukal jsem se na nejake vystupy ze saru a jedine co vidim je narust tcp-tw - z manu jsem se docetl ze tato hodnota predstavuje "Number of TCP sockets in TIME_WAIT state", ale nevim presne jestli to znamena ze tyto sokety "cekaji na obslouzeni" (tzn mozny problem) a nebo jsou "idle".

12:00:01 AM    totsck    tcpsck    udpsck    rawsck   ip-frag    tcp-tw
12:10:02 AM      2382      1081         5         2         0      1923
12:20:01 AM      2596      1170         5         2         0      1843
12:30:01 AM      5937      2490         5         2         0      3608
12:40:01 AM      2267       941         5         2         0      2785
12:50:01 AM      3497      1571         5         2         0      1938
01:00:01 AM      4114      1786         5         2         0       988
01:10:01 AM       624       189         5         2         0       138
01:20:01 AM      1960       766         5         2         0       744
01:30:01 AM      2451      1029         5         2         0       371
01:40:01 AM       302        50         5         2         0        40
01:50:01 AM       275        38         5         2         0        28
02:00:01 AM       246        23         5         2         0        26
02:10:01 AM       234        17         5         2         0        37
02:20:01 AM       239        22         5         2         0        21
02:30:01 AM       228        17         5         2         0        21
02:40:01 AM       227        14         5         2         0        22
02:50:01 AM       235        17         5         2         0        20
03:00:01 AM       236        22         5         2         0        24
03:10:01 AM       232        18         5         2         0        29
03:20:01 AM       228        14         5         2         0        24
03:30:01 AM       229        14         5         2         0        23
03:40:01 AM       225        13         5         2         0        37
03:50:01 AM       235        18         5         2         0        23
04:00:01 AM       221        11         5         2         0        24
04:10:01 AM       224        12         5         2         0        34
04:20:01 AM       241        19         5         2         0        21
04:30:01 AM       227        14         5         2         0        22
04:40:01 AM       224        12         5         2         0        22

Nutno podotknout ze z vystupu vyse se zacne situace od 01:40 vracet do normalu - nasledujici hodnoty jsou vice mene stejne po cely den. Ale HAProxy oznacuje backendy za down az nekdy do 03:00 (plus, minus, to ted neni relevantni). Takze se mozna divam na spatnou statistiku.

Muzete prosim trosku blize vysvetlit jak mam chapat tcp-tw? Pripadne se nebranim nejakym doporucenim co blize zkontrolovat na strane OS.

Predem moc diky za Vase rady a nazory.

Dotaz: HAProxy L6, L4 timeouty