abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    včera 21:44 | Nová verze

    Byl vydán Mozilla Firefox 143.0. Přehled novinek v poznámkách k vydání a poznámkách k vydání pro vývojáře. Nově se Firefox při ukončování anonymního režimu zeptá, zda chcete smazat stažené soubory. Dialog pro povolení přístupu ke kameře zobrazuje náhled. Obzvláště užitečné při přepínání mezi více kamerami. Řešeny jsou rovněž bezpečnostní chyby. Nový Firefox 143 bude brzy k dispozici také na Flathubu a Snapcraftu.

    Ladislav Hagara | Komentářů: 0
    včera 17:22 | Nová verze

    Byla vydána betaverze Fedora Linuxu 43 (ChangeSet), tj. poslední zastávka před vydáním finální verze, která je naplánována na úterý 21. října.

    Ladislav Hagara | Komentářů: 0
    včera 12:22 | Nová verze

    Multiplatformní emulátor terminálu Ghostty byl vydán ve verzi 1.2 (𝕏, Mastodon). Přehled novinek, vylepšení a nových efektů v poznámkách k vydání.

    Ladislav Hagara | Komentářů: 0
    včera 00:11 | Nová verze

    Byla vydána nová verze 4.5 (𝕏, Bluesky, Mastodon) multiplatformního open source herního enginu Godot (Wikipedie, GitHub). Přehled novinek i s náhledy v příspěvku na blogu.

    Ladislav Hagara | Komentářů: 0
    15.9. 21:33 | Nová verze

    Byla vydána verze 3.0 (Mastodon) nástroje pro záznam a sdílení terminálových sezení asciinema (GitHub). S novou verzí formátu záznamu asciicast v3, podporou live streamingu a především kompletním přepisem z Pythonu do Rustu.

    Ladislav Hagara | Komentářů: 0
    15.9. 21:00 | Komunita

    Canonical oznámil, že bude podporovat a distribuovat toolkit NVIDIA CUDA (Wikipedie) v Ubuntu.

    Ladislav Hagara | Komentářů: 0
    15.9. 20:44 | IT novinky

    Tržní hodnota americké společnosti Alphabet, která je majitelem internetového vyhledávače Google, dnes poprvé překonala hranici tří bilionů dolarů (62,1 bilionu Kč). Alphabet se připojil k malé skupině společností, které tuto hranici pokořily. Jsou mezi nimi zatím americké firmy Nvidia, Microsoft a Apple.

    Ladislav Hagara | Komentářů: 2
    15.9. 20:33 | IT novinky

    Spojené státy a Čína dosáhly dohody ohledně pokračování populární čínské platformy pro sdílení krátkých videí TikTok v USA. V příspěvku na síti Truth Social to dnes naznačil americký prezident Donald Trump. Dosažení rámcové dohody o TikToku vzápětí oznámil americký ministr financí Scott Bessent, který v Madridu jedná s čínskými představiteli o vzájemných obchodních vztazích mezi USA a Čínou. Bessentova slova později potvrdila také čínská strana.

    Ladislav Hagara | Komentářů: 0
    15.9. 16:55 | Komunita

    MKVToolNix, tj. sada nástrojů pro práci s formátem (medialnym kontajnerom) Matroska, byl vydán ve verzi 95.0. Podpora přehrávání formátu Matroska míří do Firefoxu [Bug 1422891, Technický popis]. Přehrávání lze již testovat ve Firefoxu Nightly.

    Ladislav Hagara | Komentářů: 0
    13.9. 17:33 | Pozvánky

    Spolek OpenAlt zve příznivce otevřených řešení a přístupu na 211. sraz, který proběhne v pátek 19. září od 18:00 ve Studentském klubu U Kachničky na Fakultě informačních technologií Vysokého učení technického na adrese Božetěchova 2/1. Na srazu proběhne přednáška Jiřího Eischmanna o nové verzi prostředí GNOME 49. Nemáte-li možnost se zúčastnit osobně, přednáškový blok bude opět streamován živě na server VHSky.cz a následně i zpřístupněn záznam.

    Ladislav Hagara | Komentářů: 0
    Pro otevření více webových stránek ve webovém prohlížečí používám
     (81%)
     (6%)
     (4%)
     (3%)
     (4%)
     (2%)
    Celkem 187 hlasů
     Komentářů: 12, poslední 10.9. 13:00
    Rozcestník

    Ako dosiahnuť s rsync over ssh až 40MB/s ?

    20.5.2022 11:12 | Přečteno: 1883× | c0mput3rs | poslední úprava: 20.5.2022 11:21

    Takže dnes len mini zápis. Potrebujem robiť dosť často rsync celého systému z jedného servera do mirror adresára na druhom stroji (cez ssh) a dlhodobo som sa potýkal s problémom dostať sa nad 10 - 15MB/s. Trošku som sa pohral s nastaveniami rsync over ssh a tu je výsledok - cez 40 MB/s. Hádam sa to bude niekomu hodiť.

    Takže z lokálneho stroja robíme komplet rsync celého systému na stroj user@ip do adresára destination_dir (excludnuť si môže každý podľa želania čo len chce).

    rsync -aHAXxv --numeric-ids --delete --progress --human-readable -e "ssh -T -c aes256-gcm@openssh.com -o Compression=no -x" / --exclude={"/swapfile","/dev/*","/proc/*","/sys/*","/tmp/*","/run/*","/mnt/*","/media/*","/lost+found"} user@ip:/destination_dir
    


           

    Hodnocení: 100 %

            špatnédobré        

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    Komentáře

    Vložit další komentář

    David Heidelberg avatar 20.5.2022 12:08 David Heidelberg | skóre: 46 | blog: blog_
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    320 Mbit z 1 Gbit síťovky není takovej odvar, ale jde to přes ssh, takže to chápu, btw. hledání "rsync ssh 1gbit" 1. odkaz https://gist.github.com/sbamin/8c76fa146d43c5e4a287753921e1f05b
    20.5.2022 13:45 disorder | blog: weblog
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    vela stastia s pouzitim arcfour
    20.5.2022 13:53 Mayhem
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Proc ne obycejny rsync? Ale jinak +1.
    20.5.2022 13:54 MP
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Co zkusit paralelni rsync popr. rsync server?
    20.5.2022 16:32 t@fu
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Pustit 4 vlaky na jednokolejku ma jaky smysl? :D
    Jendа avatar 20.5.2022 17:51 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Protože to může hnít na latenci (sítě, ale třeba i disku -- dneska pro velké I/O chceš používat NCQ) nebo na výkonu jednoho jádra procesoru.
    20.5.2022 20:30 petr_p | skóre: 59 | blog: pb
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Vzhledem k tomu, že autorovi stačilo změnit nastavení SSH, tak bych neřekl, že měl problém se sítí nebo diskem. V podstatě celý zápisek by se dal zkrátit na vypněte kompresi (-o Compression=no) a šifrujte pomocí AES-256 (-c aes256-gcm@openssh.com). To první má značný význam pro odlehčení procesoru, to druhé trochu také, pokud SSH/OpenSSL používá akceleraci SIMD instrukcemi procesoru. Při takto vysokých datových tocích se už může dostat na hranici výkonu jednoho jádra procesoru a vypnutí nepotřebných transformací může pomoci. Pro ověření hypotézy bych doporučil rsync na localhostu a sledovat vytížení procesoru.
    20.5.2022 21:44 t@fu
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Hnit na latenci? Dafuq? Se bavime o 1GB LAN kde jedina latence je vytukat na klavesnici prikaz rsync :-) A i kdyby cil byl za sedmero horama, za sedmero rekama, za sedmero kopci a sedmero lesy tak v dobe 4K youtube pres https je latence maximalne pri navazani spojeni a pak to frci! :-)
    Jendа avatar 20.5.2022 21:52 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Ty jsi nečetl odkazovaný článek?
    Jendа avatar 20.5.2022 21:53 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Vypichujeme to podstatné, chápu, že je to dlouhé:
    Bohužel, tohle OpenSSH nedělá. Přestože podkladové TCP spojení zvládne výrazně více, SSH nad ním přenášelo dříve data pouze po 64kB blocích. Později byl tento limit navýšen na 1024 kB.
    (vlastní flow control s moc malým oknem)
    21.5.2022 08:23 R.C.
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Na muj stroj OpenSSH nesmi! Do roku 20 bugu z toho 1-2 critical. Ja mam Dropbeara. Teleport taky neni spatny.
    20.5.2022 16:41 bandurek
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Jen pro zajímavost jak je ten systém velikej?
    cbrpnk avatar 20.5.2022 17:37 cbrpnk | skóre: 10 | blog: bl0gium
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    size: 250G  used: 150G   free: 100G
    20.5.2022 21:50 Grèta
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    Šifrování je neekologické. Kdyby se na jeden den upustilo od ssh, vpn a https tak se ušetří uhlíkových exhalátů v ekvivalentu spálení 6 tankerů ropy a 181 vagonů uhlí. Baterky v mobilech by měli o 37% větší výdrž. Bůh stejně vscheno vidí a zná tak vás šifrování před nebeským soudem stejně neochrání.
    Petr Tomášek avatar 20.5.2022 21:58 Petr Tomášek | skóre: 39 | blog: Vejšplechty
    Rozbalit Rozbalit vše Re: Ako dosiahnuť s rsync over ssh až 40MB/s ?
    A jéje, to zas bude jednou komix...
    multicult.fm | monokultura je zlo | welcome refugees!

    Založit nové vláknoNahoru

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.