abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 17:50 | Komunita

Nadace The Document Foundation (TDF) zastřešující vývoj svobodného kancelářského balíku LibreOffice slaví 5 let od svého oficiálního vzniku. Nadace byla představena 28. září 2010. Formálně byla založena ale až 17. února 2012.

Ladislav Hagara | Komentářů: 0
dnes 12:50 | Komunita

Mozilla.cz informuje, že dosud experimentální funkce Page Shot z programu Firefox Test Pilot (zprávička) se stane součástí Firefoxu. Page Shot je nástroj pro vytváření snímků webových stránek. Umí výběr oblasti, prvku stránky (např. odstavce), nebo uložení snímku celé stránky. Snímky lze ukládat na disk nebo nahrávat na server Mozilly. Nedávno bylo oznámeno, že se součástí Firefoxu stane Activity Stream.

Ladislav Hagara | Komentářů: 5
dnes 04:10 | Nová verze

Po 10 týdnech vývoje od vydání Linuxu 4.9 (zprávička) oznámil Linus Torvalds, mj. již 20 let žijící v USA, vydání Linuxu 4.10 (LKML). Přehled nových vlastností a vylepšení například na Kernel Newbies a v Jaderných novinách (1, 2 a 3). Kódové jméno Linuxu 4.10 je Fearless Coyote.

Ladislav Hagara | Komentářů: 3
včera 15:55 | Zajímavý projekt

Vyzkoušet si příkazy a vyřešit několik úkolů lze na stránkách Commandline Challenge (CMD Challenge). Úkoly lze řešit různými způsoby, důležitý je výsledek. Zdrojové kódy jsou k dispozici na GitHubu pod licencí MIT.

Ladislav Hagara | Komentářů: 18
18.2. 17:35 | Bezpečnostní upozornění

Německá Bundesnetzagentur (obdoba českého ČTU) zakázala na německém území prodej panenky Cayla kvůli „špionáži“ dětí. Tato elektronická hračka obsahuje mikrofon, reproduktor a kameru a bezdrátové komunikační rozhraní, pomocí kterého se hračka připojuje na servery výrobce. Takovýmto způsobem může hračka pomocí umělé inteligence „odpovídat“ na dotazy dítěte. Hlavní problém bude ale asi někde jinde, podle prvotních zpráv může

… více »
Petr Tomášek | Komentářů: 31
17.2. 15:30 | Bezpečnostní upozornění

CSIRT.CZ upozorňuje, že bezpečnostní experti objevili nový typ malwaru, jenž cílí na open source e-commerce platformu Magento. Malware je zajímavý tím, že se jedná o první svého druhu, jehož kód zůstává skrytý v SQL databázi zasaženého e-shopu. Škodlivý kód je volán pomocí tzv. SQL trigerru, který je spouštěn při každém vytvoření objednávky v systému.

Ladislav Hagara | Komentářů: 3
17.2. 09:00 | Nová verze

Bylo vydáno Ubuntu 16.04.2 LTS, tj. druhé opravné vydání Ubuntu 16.04 LTS s kódovým názvem Xenial Xerus. Přehled novinek v poznámkách k vydání a v přehledu změn.

Ladislav Hagara | Komentářů: 57
17.2. 06:00 | Zajímavý článek

Pavel Tišnovský se v dvoudílném článku na MojeFedora.cz věnuje tvorbě pluginů (modulů) pro bitmapový grafický editor GIMP. Pomocí pluginů lze GIMP rozšiřovat o další funkce. Implementovat lze například nové filtry nebo pomocné utility pro tvorbu animací či poloautomatickou retuš snímků.

Ladislav Hagara | Komentářů: 6
16.2. 23:32 | Komunita

Do 30. března se lze přihlásit do dalšího kola programu Outreachy, jehož cílem je přitáhnout do světa svobodného a otevřeného softwaru lidi ze skupin, jež jsou ve světě svobodného a otevřeného softwaru málo zastoupeny. Za 3 měsíce práce, od 30. května do 30. srpna 2017, v participujících organizacích lze vydělat 5 500 USD. Jedná se již o 14. kolo tohoto programu.

Ladislav Hagara | Komentářů: 11
16.2. 23:13 | Nová verze

Byla vydána verze 0.92.1 svobodného multiplatformního vektorového grafického editoru Inkscape. Přehled novinek v poznámkách k vydání. Řešen je mimo jiné problém s verzí 0.92, jež rozbíjí dokumenty vytvořené v předchozích verzích Inkscape. Více v příspěvku na blogu Davida Revoye, autora open source webového komiksu Pepper&Carrot nebo portrétu GNU/Linuxu.

Ladislav Hagara | Komentářů: 0
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (13%)
 (2%)
 (71%)
 (3%)
 (10%)
Celkem 669 hlasů
 Komentářů: 53, poslední dnes 18:38
Rozcestník
Reklama

Dotaz: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]

25.12.2010 13:51 Skřivy | skóre: 10
Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Přečteno: 721×

Ahoj,

uz cca pul roku resime problemy s pripojenim k databazi.

Situace:

  • 2 mysql servery (replikace master->slave) [predimenzovany hw, load kolem 4, nezatizene disky, dostatek pameti]
  • 8 web serveru
  • 30 dalsich serveru, ktere se k databazi pripojuji
  • aplikace napsana v php

Problem:

  • ve spicce i mimo spicku (ne vsak v noci) se stava, ze se nepodari pripojit k mysql serveru a php vrati chybu.
  • pri debugovani jsme zjistili, ze pakety projdou pres iptables, ale jiz se nedostanou z kernelu do aplikace (nedostanou se do funkce accept) jakoby se ztratily nekde v kernelu
  • chova se to dost ruznorode - jeden den vse funguje v poradku i presto, ze je mnohem vyssi zatez nez dalsi den, kdy nastava tento problem
  • lagy: v cyklu jsme se zkouseli porad pripojovat k databazi (cca s pul vterinovym odstupem) v nekolika vlaknech a vzdy v neurcitych intervalech na cca 5 vterin se sekly vsechny vlakna a spojeni se nepodarilo vytvorit.

Dalsi poznamky:

  • persistentni spojeni: nepouzitelne - spojenich je tam pak desitky tisic a cele to jde dolu jeste rychleji
  • mysql proxy: ten samy problem
  • otestovane kernely: 2.6.30-bpo.2-amd64, 2.6.32-bpo.2-amd64, 2.6.26-2-amd64
  • neupravene parametry v sysctl
  • system: Debian 5.0.6
  • problem se nam povedlo nasimulovat i s jinymi aplikacemi nez mysql serverem

Samozrejme uspesneho resitele ceka odmena.

Jarda


Řešení dotazu:


Odpovědi

25.12.2010 14:16 oho | skóre: 1
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
pisete ze pouzivate iptables, takze tam nejspis mate nejaka stavova pravidla, nemate teda nahodou plnou conntrack tabulku?

viz. http://www.taxze.com/ip_conntrack-ct-0-table-full-dropping-packet.htm
25.12.2010 15:37 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Do logu jsme se divali, bohuzel ani skytnuti o tom, ze by neco melo byt spatne. :\

Jinak ano - firewall tam byl, prozatim jsem jej vypnul (cili vyprazdnil, ale iptables v kernelu ponechal).
2.1.2011 21:19 petr_p | skóre: 59 | blog: pb
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]

Malý TCP back-log?

Jak se klient dozví, že spojení do databáze nefunguje? Dostane TCP reset, chybu ICMP, prostě vytimeoutuje?

5.1.2011 14:26 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Rekl bych, ze vytimeoutuje. Tcpdump ukazuje, ze pakety na server prijdou (kdyz jsem zapnul logovani na iptables, tak se spravne zalogovaly). Nicmene na funkci accept (zjistovani stracem) se jiz nedostanou, cili ze serveru ani neodejde zadna odpoved.
5.1.2011 20:27 petr_p | skóre: 59 | blog: pb
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Nehádejte a podívejte se, co ze serveru odchází. Chybový packet odesílá jádro, ne naslouchající proces.
7.1.2011 15:08 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Na klienta jiz zadna odpoved neprijde (zjisteno tcpdumpem).
5.1.2011 14:45 Ivan
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
OT: v takovyhle situacich se vyplati duplikovat na switchi porty(serveru i klienta) a tcpdump spoustet na jinych pocitacich pripojenych k tem duplikovanym portum.
5.1.2011 15:49 iwk
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Zeby nofile limit v /etc/security/limits.conf ?
7.1.2011 15:07 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Prázdné.

ulimit je unlimeted.
rADOn avatar 7.1.2011 17:12 rADOn | skóre: 44 | blog: bloK | Praha
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Co na to netstat? Nemas nahodou hromady portu zadrenych ve stavu TIME_WAIT?
"2^24 comments ought to be enough for anyone" -- CmdrTaco
17.1.2011 23:43 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Ano, to souhlasi. Zkusili jsme i snizit dobu, po kterou tam budou hnit, nicmene to vyresilo problem pouze castecne.
Řešení 1× (Skřivy (tazatel))
rADOn avatar 19.1.2011 11:48 rADOn | skóre: 44 | blog: bloK | Praha
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Viz unix-socket-faq. Snizeni tcp_fin_timeout pomuze jen do urcite miry a za urcitou cenu. Pokud to nestaci, budete muset aplikaci naucit pouzivat persistentni spojeni.
"2^24 comments ought to be enough for anyone" -- CmdrTaco
19.1.2011 16:23 HoGo
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Co mysql parametry ?

set-variable = wait_timeout=20

set-variable = interactive_timeout=20
3.2.2011 14:27 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Tohle uz tam mame dlouho.
3.2.2011 14:28 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Persistentni spojeni problem neresily.

Jinak:http://www.mysqlperformanceblog.com/2006/11/12/are-php-persistent-connections-evil/
3.2.2011 14:30 Skřivy | skóre: 10
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
Tohle nam dost pomohlo, cili to oznacuji jako reseni. Vsem dekuji za napady.
Grunt avatar 18.1.2011 00:56 Grunt | skóre: 21 | blog: Expresivní zabručení | Lanžhot
Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
pri debugovani jsme zjistili, ze pakety projdou pres iptables, ale jiz se nedostanou z kernelu do aplikace (nedostanou se do funkce accept) jakoby se ztratily nekde v kernelu
Sice ne přímo řešení, ale částečná indicie by to mohla být.
Na co 64-bitů když to jde i s jedním? | 80.78.148.5 | Hack (for) free or Die Hard!

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.