abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

    včera 15:22 | IT novinky

    Probíhá Meta Connect 2023. Společnost Meta představuje své novinky v oblasti AI a virtuální, smíšené a rozšířené reality. Představeny byly nové chytré brýle Ray-Ban | Meta a headset Meta Quest 3.

    Ladislav Hagara | Komentářů: 0
    včera 12:00 | IT novinky

    Eben Upton oficiálně představil (YouTube) nové Raspberry Pi 5 (YouTube). Je více než 2x výkonnější než jeho předchůdce, model 4B.

    Ladislav Hagara | Komentářů: 6
    včera 08:00 | Nová verze

    Byl vydán (YouTube) Counter-Strike 2. Nativně také pro Linux. Jedná se o největší technologický skok v historii této populární herní série.

    Ladislav Hagara | Komentářů: 6
    včera 07:00 | Komunita

    Richard Stallman vystoupí v Praze s přednáškou Free Software And Your Freedom. V sobotu 30. září ve 14:30 na Pedagogické fakultě UK a v neděli 1. října v 18:00 hodin v rámci konference Hackers Congress Paralelní Polis.

    Jendа | Komentářů: 7
    27.9. 14:44 | Nová verze

    Byla vydána verze 6 s kódovým název Faye linuxové distribuce LMDE (Linux Mint Debian Edition). Podrobnosti v poznámkách k vydání. Linux Mint vychází z Ubuntu. LMDE je postaveno na Debianu.

    Ladislav Hagara | Komentářů: 2
    27.9. 13:11 | Bezpečnostní upozornění

    Byly publikovány informace o novém bezpečnostním problému pojmenovaném GPU.zip (paper, GitHub). S vlastním logem. Jedná se o možný útok postranním kanálem na grafickou kartu (GPU). Proces může "krást pixely" jinému procesu.

    Ladislav Hagara | Komentářů: 1
    27.9. 08:00 | Komunita

    Projekt GNU dnes slaví 40. výročí. Přesně před čtyřiceti lety, 27. září 1983, Richard Stallman oznámil, že se chystá napsat s Unixem kompatibilní operační systém GNU (Gnu's Not Unix). Hlavní oslava a setkání hackerů probíhá ve Švýcarsku ve městě Biel/Bienne. Na programu je také přednáška Richarda Stallmana.

    Ladislav Hagara | Komentářů: 11
    26.9. 15:55 | Nová verze

    Byl vydán Mozilla Firefox 118.0. Přehled novinek v poznámkách k vydání, poznámkách k vydání pro firmy a na stránce věnované vývojářům. Vypíchnout je nutno automatický lokální strojový překlad webových stránek. Řešeny jsou rovněž bezpečnostní chyby. Nový Firefox 118 je již k dispozici také na Flathubu a Snapcraftu.

    Ladislav Hagara | Komentářů: 41
    26.9. 12:55 | Nová verze

    Byla vydána nová major verze 15.0.0 softwaru OCRmyPDF pro přidávání textové vrstvy k naskenovaným PDF dokumentům (PDF/A). Přehled novinek v poznámkách k vydání. OCRmyPDF využívá pro optické rozpoznávání znaků (OCR) engine Tesseract.

    Ladislav Hagara | Komentářů: 22
    26.9. 12:22 | Zajímavý software

    Karel Matějka zveřejnil druhé demo své chystané hry Bzzzt. Kromě verze pro Windows a macOS je dostupná i verze pro Linux. Plná verze hry má vyjít zanedlouho.

    Ondřej J | Komentářů: 8
    Knihy s linuxovou tematikou
     (19%)
     (15%)
     (51%)
     (27%)
    Celkem 279 hlasů
     Komentářů: 11, poslední 17.9. 19:19
    Rozcestník

    Dotaz: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    9.4.2014 15:49 jadd | skóre: 34 | blog: Greenhorn
    Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Přečteno: 470×
    Kopíroval jsem 5GB malých souborů z NTFS do nově vytvořeného HOME s EXT4 (výchozí volby připojení) na laptovém disku, mapovaném přes klasiku, ne LVM.

    Začal jsem včera ve 23h a kopírování skončilo dnes ve 12h. Na otestování mám bývalý SWAP oddíl o velikosti 1GB. Jaké zvolit připojovací volby těchto FS aby jsem mohl správně vybrat?

    Poznámka: malé soubory jsou u mě 1kB až 300kB (jpg, wav, mp3).

    Jak získat časy pro objektivitu dokončeného kopírování?

    Odpovědi

    9.4.2014 17:59 fedor
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Začal jsem včera ve 23h a kopírování skončilo dnes ve 12h.

    Nesmysl, při dnešním hw naprostá blbost. Nebylo to náhodou 500G ?
    9.4.2014 18:41 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Ne, bylo to jak píšu.
    9.4.2014 19:10 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Příloha:
    Podmínky pro test: poběží to na tom samém hw se stejným výkonem. Takže na čem to běží/běželo je jedno. Ale pro info: CPU core2duo P8600, RAM 4GB, HDD Seagate ST9320421AS. Není problém kopírování 5GB velkých souborů.
    9.4.2014 19:25 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    du -s

    5898952

    9.4.2014 22:24 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Podle mne to záleží na tom, jak je nastavený sync. Rotační HDD má cca 100 IOPS (v notebooku méně). Pro zápis je potřeba minimálně zápis do dvou míst. vlastní data + zápis do inode. Pokud je FS nastaven tak, že syncuje okamžitě, tak zapíše maximálně teoreticky 50 souborů za sekundu, v praxi spíše 20 a méně, nezávisle na tom, jak jsou malé. Z toho plyne že za hodinu to zapíše asi ani ne 50000 souborů, pokud ten počet souborů se pohyboval kolem 500 000 mohlo to jet i těch 13 hodin. pokud jste kopíroval ze stejného disku (jiného oddílu) na stejný disk, tak podobné IO se muselo provést i při čtení takže to bude 5-10 souborů za vteřinu.
    10.4.2014 00:49 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    No, měl jsem taky říct, že jsem to kopíroval přes Nautila, dělá si nejdříve ověřování místa apod. S cp by to bylo rychlejší.

    Teď jsem zkoušel stejnou cestou kopírovat 200MB (50000souborů), do btrfs, ext4, ext3 reiserfs3.6 (časy dost podobné o něco horší s btrfs o něco lepší reiserfs), začné to cca 6MB/s ale po 180MB se snižuje na cca 700KB/s a stále to jde dolů.

    Taky jsem zaznamenal a to ikdyž jsem ty soubory smazal z koše (to bylo celkem rychlé). Několikrát to hlásilo, že v adresáři /run došlo místo (Nautilus si to nějak uchovává v paměti) i když už ty soubory jsou smazaný. Byly teda ve schránce ale při prvním pokusu to zaplnění /run nehlásilo až když jsem první pokus smazal do koše a ten hned vysypal a začal pokus dva (s jiným FS).

    Vyšlo mi z toho ve zkratce, že EXT4 nemá cenu měnit za btrfs který je přizpůsobený na velké soubory ale ztrácí víc na těch malých. A EXT3, Reiser3.6 má méně vlastností než EXT4. Objektivní výsledek to není ani příliš pro mě.

    Tykat!

    10.4.2014 22:26 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    700KB/s → 700kB/s
    11.4.2014 00:05 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    btrfs není určený pro rychlost. Už jen to že má vyšši bezpečnost proti náhodné chybě diky checksum něco ve výkonu stojí. Phoronix pravidelně dělá výkonové testy filesystemů. Možná nejsou zcela reprezentativní, ale jistě je dobré je vzít v úvahu.
    11.4.2014 05:52 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    Díky za odkaz,

    .. tohle ní přímo na tebe

    Mě by zajímalo jestli nejsem limitovanej tím rošířeným oddílem v kterém mám ty linuxové oddíly. Je tam psáno, že rošířený oddíl je typu NTFS. Jestli by to nějak zvýšilo výkon, kdybych ten rošířený neměl a měl jen primární oddíly?

    11.4.2014 11:14 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Nijak. Oddíl je jen posloupnost sektorů na disku od sektoru xxx do sektoru yyyy. Původní rozdělení Microsoftu z doby MS-DOS a 20MB HDD definovalo část MBR s tabulkou oddílů, která měla 4 položky a čísla sektorů byly 32 bitová (primární oddíly). Rozšířený oddíl je položka v MBR (od sektoru xxx do yyy), která definuje oddíl, který má uvnitř má také podobnou tabulku oddílů (logické oddíly) (jeho oddíly samozřejmě nemohou přesáhnout hranice rozšířeného oddílu) a tím umožňuje mít více než 4 oddíly na disku. Při startu si systém přečte všechny tyhle tabulky, vytvoří příslušné sda1,sda2,sda5 atd. a mezi přístupem na primární a logický oddíl není rozdíl. Zhruba řečeno stejně přístup na sektor aaa oddílu je přístup na xxx+aaa sektor disku, kde xxx počáteční sektor oddílu.

    Samozřejmě sektory s nižšími čísly mají o něco vyšší přenosové rychlosti, díky tomu, že jsou na větších poloměrech plotny a při jedné otáčce disku pod čtecí hlavou projede více sektorů.
    9.4.2014 19:00 Petr | skóre: 29
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Pokud byly soubory hodne male tak proc ne..
    10.4.2014 01:12 Andrej | skóre: 50 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    Nebyl bottleneck spíš na straně čtení z NTFS? Nemůže být disk nějak poškozený? Co třeba obskurní velikost bloku? Jakmile člověk používá zastaralé souborové systémy typu ext4, může se celkem snadno stát, že omylem vytvoří filesystém s velikostí bloku odlišnou od velikosti stránky (4 kB na Intelu, 8 kB na Power7) a pak se nestačí divit. Ale takhle dramaticky špatný výkon by to mít nemělo ani s nevhodnou velikostí bloku.

    10.4.2014 02:21 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu

    Tak samozřejmě, že rychlost čtení z NTFS byla omezená ale vždy jsem zkoušel z něj (přímo). Ted jsem našel čtení a skript, a změnil v něm filesize 1024 na 128. Bohužel ale nezjistím reálnou situaci (tu svou), a nevím jestli generovaná data dají výsledek jako kdybych kopíroval ty své (kde každý soubor má jinou velikost a jinou strukturu obsahovou). Bylo by možné poprosit, předělat to na

    z C:\User\Data do /run/media/jadd/TEST ?

    Heron avatar 11.4.2014 12:16 Heron | skóre: 53 | blog: root_at_heron | Olomouc
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Osobně také vidím problém na čtecí straně (bez ohledu na FS), protože je to právě seek u čtení, který to bude brzdit. Každý čtený soubor bude vysoce pravděpodobně umístěn jinde. Zatímco na straně zápisu bude sync probíhat jednou za commit time a taky si to ten fs může uspořádat sekvenčně.
    11.4.2014 16:23 host
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Souhlas
    10.4.2014 19:15 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    /etc/mke2fs.conf prozrazuje vhodnou konfiguraci pro malé soubory pro nově vytvářené oddíly.
    10.4.2014 19:59 jirka
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    +1
    10.4.2014 22:18 jadd | skóre: 34 | blog: Greenhorn
    Rozbalit Rozbalit vše Re: Otestování vhodného FS ext4 nebo btrfs - pro svou potřebu
    Přílohy:
    Takže jsem vytvořil takto a zkusil scénář z NTFS jako předtím, ale změnu jsem nepozoroval. Ten skript jsem změnil (v příloze) a provedl amatérský test na EXT4 a EXT4 small vždy 2x (v příloze). Když do toho kouknu, zdá se mi, že EXT4 small má horší výsledky ale nevím jak to mám číst. mke2fs -t ext4 -T small -j -L TEST /dev/sda5

    Uvažoval jsem o znovuvytvoření oddílů ale vidím, že by to byla zbytečná práce.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.