abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 00:11 | Nová verze

    Open source modální textový editor Helix, inspirovaný editory Vim, Neovim či Kakoune, byl vydán ve verzi 25.07. Přehled novinek se záznamy terminálových sezení v asciinema v oznámení na webu. Detailně v CHANGELOGu na GitHubu.

    Ladislav Hagara | Komentářů: 0
    včera 20:44 | IT novinky

    Americký výrobce čipů Nvidia získal od vlády prezidenta Donalda Trumpa souhlas s prodejem svých pokročilých počítačových čipů používaných k vývoji umělé inteligence (AI) H20 do Číny. Prodej těchto čipů speciálně upravených pro čínský trh by tak mohl být brzy obnoven, uvedla firma na svém blogu. Americká vláda zakázala prodej v dubnu, v době eskalace obchodního sporu mezi oběma zeměmi. Tehdy to zdůvodnila obavami, že by čipy mohla využívat čínská armáda.

    Ladislav Hagara | Komentářů: 0
    včera 17:22 | Nová verze

    3D software Blender byl vydán ve verzi 4.5 s prodlouženou podporou. Podrobnosti v poznámkách k vydání. Videopředstavení na YouTube.

    Ladislav Hagara | Komentářů: 0
    14.7. 22:22 | Komunita

    Open source webový aplikační framework Django slaví 20. narozeniny.

    Ladislav Hagara | Komentářů: 0
    14.7. 16:11 | Komunita

    V Brestu dnes začala konference vývojářů a uživatelů linuxové distribuce Debian DebConf25. Na programu je řada zajímavých přednášek. Sledovat je lze online.

    Ladislav Hagara | Komentářů: 0
    14.7. 11:33 | IT novinky

    Před 30 lety, tj. 14. července 1995, se začala používat přípona .mp3 pro soubory s hudbou komprimovanou pomocí MPEG-2 Audio Layer 3.

    Ladislav Hagara | Komentářů: 26
    14.7. 10:55 | IT novinky

    Výroba 8bitových domácích počítačů Commodore 64 byla ukončena v dubnu 1994. Po více než 30 letech byl představen nový oficiální Commodore 64 Ultimate (YouTube). S deskou postavenou na FPGA. Ve 3 edicích v ceně od 299 dolarů a plánovaným dodáním v říjnu a listopadu letošního roku.

    Ladislav Hagara | Komentářů: 20
    13.7. 17:55 | Zajímavý projekt

    Společnost Hugging Face ve spolupráci se společností Pollen Robotics představila open source robota Reachy Mini (YouTube). Předobjednat lze lite verzi za 299 dolarů a wireless verzi s Raspberry Pi 5 za 449 dolarů.

    Ladislav Hagara | Komentářů: 17
    11.7. 16:44 | Komunita

    Dnes v 17:30 bude oficiálně vydána open source počítačová hra DOGWALK vytvořena v 3D softwaru Blender a herním enginu Godot. Release party proběhne na YouTube od 17:00.

    Ladislav Hagara | Komentářů: 3
    11.7. 14:55 | Humor

    McDonald's se spojil se společností Paradox a pracovníky nabírá také pomocí AI řešení s virtuální asistentkou Olivii běžící na webu McHire. Ian Carroll a Sam Curry se na toto AI řešení blíže podívali a opravdu je překvapilo, že se mohli přihlásit pomocí jména 123456 a hesla 123456 a získat přístup k údajům o 64 milionech uchazečů o práci.

    Ladislav Hagara | Komentářů: 16
    Jaký je váš oblíbený skriptovací jazyk?
     (59%)
     (26%)
     (7%)
     (3%)
     (1%)
     (1%)
     (4%)
    Celkem 398 hlasů
     Komentářů: 16, poslední 8.6. 21:05
    Rozcestník

    Dotaz: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]

    25.12.2010 13:51 Skřivy | skóre: 10
    Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Přečteno: 817×

    Ahoj,

    uz cca pul roku resime problemy s pripojenim k databazi.

    Situace:

    • 2 mysql servery (replikace master->slave) [predimenzovany hw, load kolem 4, nezatizene disky, dostatek pameti]
    • 8 web serveru
    • 30 dalsich serveru, ktere se k databazi pripojuji
    • aplikace napsana v php

    Problem:

    • ve spicce i mimo spicku (ne vsak v noci) se stava, ze se nepodari pripojit k mysql serveru a php vrati chybu.
    • pri debugovani jsme zjistili, ze pakety projdou pres iptables, ale jiz se nedostanou z kernelu do aplikace (nedostanou se do funkce accept) jakoby se ztratily nekde v kernelu
    • chova se to dost ruznorode - jeden den vse funguje v poradku i presto, ze je mnohem vyssi zatez nez dalsi den, kdy nastava tento problem
    • lagy: v cyklu jsme se zkouseli porad pripojovat k databazi (cca s pul vterinovym odstupem) v nekolika vlaknech a vzdy v neurcitych intervalech na cca 5 vterin se sekly vsechny vlakna a spojeni se nepodarilo vytvorit.

    Dalsi poznamky:

    • persistentni spojeni: nepouzitelne - spojenich je tam pak desitky tisic a cele to jde dolu jeste rychleji
    • mysql proxy: ten samy problem
    • otestovane kernely: 2.6.30-bpo.2-amd64, 2.6.32-bpo.2-amd64, 2.6.26-2-amd64
    • neupravene parametry v sysctl
    • system: Debian 5.0.6
    • problem se nam povedlo nasimulovat i s jinymi aplikacemi nez mysql serverem

    Samozrejme uspesneho resitele ceka odmena.

    Jarda


    Řešení dotazu:


    Odpovědi

    25.12.2010 14:16 oho | skóre: 1
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    pisete ze pouzivate iptables, takze tam nejspis mate nejaka stavova pravidla, nemate teda nahodou plnou conntrack tabulku?

    viz. http://www.taxze.com/ip_conntrack-ct-0-table-full-dropping-packet.htm
    25.12.2010 15:37 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Do logu jsme se divali, bohuzel ani skytnuti o tom, ze by neco melo byt spatne. :\

    Jinak ano - firewall tam byl, prozatim jsem jej vypnul (cili vyprazdnil, ale iptables v kernelu ponechal).
    2.1.2011 21:19 petr_p | skóre: 59 | blog: pb
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]

    Malý TCP back-log?

    Jak se klient dozví, že spojení do databáze nefunguje? Dostane TCP reset, chybu ICMP, prostě vytimeoutuje?

    5.1.2011 14:26 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Rekl bych, ze vytimeoutuje. Tcpdump ukazuje, ze pakety na server prijdou (kdyz jsem zapnul logovani na iptables, tak se spravne zalogovaly). Nicmene na funkci accept (zjistovani stracem) se jiz nedostanou, cili ze serveru ani neodejde zadna odpoved.
    5.1.2011 20:27 petr_p | skóre: 59 | blog: pb
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Nehádejte a podívejte se, co ze serveru odchází. Chybový packet odesílá jádro, ne naslouchající proces.
    7.1.2011 15:08 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Na klienta jiz zadna odpoved neprijde (zjisteno tcpdumpem).
    5.1.2011 14:45 Ivan
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    OT: v takovyhle situacich se vyplati duplikovat na switchi porty(serveru i klienta) a tcpdump spoustet na jinych pocitacich pripojenych k tem duplikovanym portum.
    5.1.2011 15:49 iwk
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Zeby nofile limit v /etc/security/limits.conf ?
    7.1.2011 15:07 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Prázdné.

    ulimit je unlimeted.
    rADOn avatar 7.1.2011 17:12 rADOn | skóre: 44 | blog: bloK | Praha
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Co na to netstat? Nemas nahodou hromady portu zadrenych ve stavu TIME_WAIT?
    "2^24 comments ought to be enough for anyone" -- CmdrTaco
    17.1.2011 23:43 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Ano, to souhlasi. Zkusili jsme i snizit dobu, po kterou tam budou hnit, nicmene to vyresilo problem pouze castecne.
    Řešení 1× (Skřivy (tazatel))
    rADOn avatar 19.1.2011 11:48 rADOn | skóre: 44 | blog: bloK | Praha
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Viz unix-socket-faq. Snizeni tcp_fin_timeout pomuze jen do urcite miry a za urcitou cenu. Pokud to nestaci, budete muset aplikaci naucit pouzivat persistentni spojeni.
    "2^24 comments ought to be enough for anyone" -- CmdrTaco
    19.1.2011 16:23 HoGo
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Co mysql parametry ?

    set-variable = wait_timeout=20

    set-variable = interactive_timeout=20
    3.2.2011 14:27 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Tohle uz tam mame dlouho.
    3.2.2011 14:28 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Persistentni spojeni problem neresily.

    Jinak:http://www.mysqlperformanceblog.com/2006/11/12/are-php-persistent-connections-evil/
    3.2.2011 14:30 Skřivy | skóre: 10
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    Tohle nam dost pomohlo, cili to oznacuji jako reseni. Vsem dekuji za napady.
    Grunt avatar 18.1.2011 00:56 Grunt | skóre: 23 | blog: Expresivní zabručení | Lanžhot
    Rozbalit Rozbalit vše Re: Problemy s tcp pripojenim pri nekolika tisicich spojeni [mysql server]
    pri debugovani jsme zjistili, ze pakety projdou pres iptables, ale jiz se nedostanou z kernelu do aplikace (nedostanou se do funkce accept) jakoby se ztratily nekde v kernelu
    Sice ne přímo řešení, ale částečná indicie by to mohla být.
    Na co 64-bitů když to jde i s jedním? | 80.78.148.5 | Hack (for) free or Die Hard!

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.