Přihlášení | Registrace

napište » Zprávičky

Open source webový aplikační framework Django slaví 20. narozeniny

včera 22:22 | Komunita

Open source webový aplikační framework Django slaví 20. narozeniny.

DebConf25

včera 16:11 | Komunita

V Brestu dnes začala konference vývojářů a uživatelů linuxové distribuce Debian DebConf25. Na programu je řada zajímavých přednášek. Sledovat je lze online.

Ladislav Hagara | Komentářů: 0

Před 30 lety se začala používat přípona .mp3

včera 11:33 | IT novinky

Před 30 lety, tj. 14. července 1995, se začala používat přípona .mp3 pro soubory s hudbou komprimovanou pomocí MPEG-2 Audio Layer 3.

Ladislav Hagara | Komentářů: 15

Commodore 64 Ultimate

včera 10:55 | IT novinky

Výroba 8bitových domácích počítačů Commodore 64 byla ukončena v dubnu 1994. Po více než 30 letech byl představen nový oficiální Commodore 64 Ultimate (YouTube). S deskou postavenou na FPGA. Ve 3 edicích v ceně od 299 dolarů a plánovaným dodáním v říjnu a listopadu letošního roku.

Ladislav Hagara | Komentářů: 16

Reachy Mini, open source robot od Hugging Face

13.7. 17:55 | Zajímavý projekt

Společnost Hugging Face ve spolupráci se společností Pollen Robotics představila open source robota Reachy Mini (YouTube). Předobjednat lze lite verzi za 299 dolarů a wireless verzi s Raspberry Pi 5 za 449 dolarů.

Ladislav Hagara | Komentářů: 11

Počítačová hra DOGWALK

11.7. 16:44 | Komunita

Dnes v 17:30 bude oficiálně vydána open source počítačová hra DOGWALK vytvořena v 3D softwaru Blender a herním enginu Godot. Release party proběhne na YouTube od 17:00.

Ladislav Hagara | Komentářů: 3

AI řešení náboru pracovníku pro McDonald's mělo přihlašovací jméno 123456 a heslo 123456

11.7. 14:55 | Humor

McDonald's se spojil se společností Paradox a pracovníky nabírá také pomocí AI řešení s virtuální asistentkou Olivii běžící na webu McHire. Ian Carroll a Sam Curry se na toto AI řešení blíže podívali a opravdu je překvapilo, že se mohli přihlásit pomocí jména 123456 a hesla 123456 a získat přístup k údajům o 64 milionech uchazečů o práci.

Ladislav Hagara | Komentářů: 16

Visual Studio Code a VSCodium 1.102

11.7. 00:11 | Nová verze

Byla vydána (𝕏) červnová aktualizace aneb nová verze 1.102 editoru zdrojových kódů Visual Studio Code (Wikipedie). Přehled novinek i s náhledy a videi v poznámkách k vydání. Ve verzi 1.102 vyjde také VSCodium, tj. komunitní sestavení Visual Studia Code bez telemetrie a licenčních podmínek Microsoftu.

Ladislav Hagara | Komentářů: 0

Apache HTTP Server (httpd) 2.4.64 řeší 8 bezpečnostních chyb

10.7. 21:00 | Bezpečnostní upozornění

Byla vydána nová verze 2.4.64 svobodného multiplatformního webového serveru Apache (httpd). Řešeno je mimo jiné 8 bezpečnostních chyb.

Ladislav Hagara | Komentářů: 4

Grok 4

10.7. 15:22 | Nová verze

Společnost xAI na síti 𝕏 představila Grok 4, tj. novou verzi svého AI LLM modelu Grok.

Ladislav Hagara | Komentářů: 12

Centrum | Napsat | Starší

navrhněte » Anketa

Jaký je váš oblíbený skriptovací jazyk?

bash (59%)

python (26%)

perl (7%)

powershell (3%)

batch (1%)

vbscript (1%)

jiný, uvedu v diskusi (4%)

Celkem 393 hlasů

Komentářů: 16, poslední 8.6. 21:05

Rozcestník

AbcLinuxu

HDmag.cz

AbcLinuxu:/ Poradna / Linuxová poradna / Pomalé zápisy přes NFS, rychlé čtení

Štítky: FTP, Internet, klient, NFS, problém, rychlost, Samba, server, síť, souborové systémy, TCP

Dotaz: Pomalé zápisy přes NFS, rychlé čtení

3.7.2010 20:20 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Pomalé zápisy přes NFS, rychlé čtení

Přečteno: 612×

Odpovědět | Admin

Mám problém s NFS serverem na gigabitové síti. Zatímco čtení přes síť je relativně rychlé (~60 MB/s, lokálně je to ~120 MB/s), zápisy jsou extrémně pomalé (~1,2 MB/s) a způsobují vysoký load na serveru (více než 10), který ho efektivně zamrzne. Zápis přes síť přitom vypadá tak, že klient pošle "naráz" třeba 40 MB dat a pak hrozně dlouho čeká, než se server vzpamatuje. Při zápisu přes FTP přitom není problém dosahovat kontinuálního zápisu i 50 MB/s, což odpovídá rychlosti na lokále.

Co jsem zkusil a nepomohlo:

přepínat mezi TCP a UDP režimem
nastavovat wsize na různé malé/velké hodnoty
nastavit na serveru i klientovi asynchronní režim

Teď se musím opravit, nastavení wsize na 65535 vlastně pomohlo. Zápis se zrychlil na 7 MB/s, ale load je nadále šílený.

I ta blbá Samba si vede líp. Tam čtení i zápis dávají tak 9 MB/s, což sice není vůbec sláva, ale aspoň je to trochu konzistentní rychlost a nezatěžuje to nijak systém.

Nástroje: Začni sledovat (2) ?

Odpovědi

3.7.2010 21:02 Käyttäjä 11133 | skóre: 58 | blog: Ajattelee menneisyyttä
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Jaká je verze NFS? Klient i server je na Linuxu?

3.7.2010 21:04 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Obojí je Linux, na serveru je to 2.6.29.6, na klientovi 2.6.32-2.

3.7.2010 21:07 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

NFSv3.

5.7.2010 13:03 AraxoN | skóre: 47 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

V 2.6.32 menili niečo čo súvisí s NFS. Tiež mi to písalo často Page allocation failure do logu, a padalo. Pri NFS prenosoch medzi strojmi, kde je po 8GB RAM (z toho 7.8GB free). Na gigabitovej sieti. Musel som kvôli tomu presedlať späť na 2.6.31, čím sa problém odstránil. Ak sa dá, tak vyskúšaj downgrade jadra.

3.7.2010 22:00 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Pokus s exportováním tmpfs odhalil, že do tmpfs to zapisuje rychlostí 83 MB/s. Takže problém je evidentně v tom, že NFS flushuje na disk jako šílený. V /etc/exports je přitom u všech exportů async...

4.7.2010 18:33 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Tak jsem možná našel příčinu. Málo RAM ("jen" 512 MB), objevilo se mi Page allocation failure. Udělal jsem dvě věci:

Vyměnil jsem RAM, teď jsou tam 4GB
Hodně jsem zvednul vm.min_free_kbytes, aby mohl kernel vždycky trochu lépe dýchat

A zatím to vypadá lépe.

5.7.2010 12:34 hajoucha | skóre: 22
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

ještě mě napadl obligátní počet nfsd -tj. počet obsluhujících daemonů. Debian má např. standardně nastaveno tuším 8, což je docela málo. V cat /proc/net/rpc/nfsd najdeš řádek začínající "th" a pak druhé číslo, které následuje (první je počet daemonů) je počet sekund, kdy běžely všechny nfsd naráz. Pokud je to vysoké, zvyš počet daemonů.

5.7.2010 12:43 Ruža Becelin | skóre: 40 | blog: RuzaBecelinBlog
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Nemas tam parametr actimeo=0 nebo noac?

Jestli ano, zkus ho dat pryc, nam to zvedlo zapis z 30 na 80MBps na 1Gbps...

5.7.2010 13:20 Heron | skóre: 53 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Při zápisu přes FTP přitom není problém dosahovat kontinuálního zápisu i 50 MB/s

Samba si vede líp. Tam čtení i zápis dávají tak 9 MB/s, což sice není vůbec sláva, ale aspoň je to trochu konzistentní rychlost a nezatěžuje to nijak systém.

Už jsem s tím asi otravný, ale co HW sítových prvků? U mě výměna na 3COM switch a Intel síťovky přinesla zrychlení na sambě na de facto saturaci gigabitu (100MB/s). Nemůže být problém v tomto?

Heron

5.7.2010 14:30 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Pomalé zápisy přes NFS, rychlé čtení

Viz zbytek diskuze. Do tmpfs byl zápis rychlý (takže HW to nebyl) a celý problém vyřešilo přidání RAM a vyhrazení většího množství paměti pro jádro.

Založit nové vlákno • Nahoru

Tiskni Sdílej:

Píšeme jinde

ISSN 1214-1267 www.czech-server.cz

Redakce | Inzerce | Podmínky použití | Osobní údaje