Dotaz: EXT4 - převod z 4kB bloku na 8kB (limit 4TB)

[Petr Maleček]

Ahoj lidičky, píšu si o radu - mám server, kde mám 4x1.5TB disk v RAID5ce. Narazil jsem nyní na problém, kdy při rozšiřování pole došlo na hranici možností oddílu EXT4 při velikosti 4kB na blok. Bohužel nemám nyní kam data jinam přesunout a rád bych využil plnou kapacitu disků (kolem 4.2TB) a časem ještě zvětšil. Nevíte, jak převést (jestli je to vůbec možné) 4kB bloky na 8kB ?

Distro - Ubuntu 10.04 (x64) LTS.

Díky

---

---

Odpovědi

[Jooky (inactive)]

mate tam LVM, alebo fs je "rovno" na tom raide ? ... niesom si isty ci ide zmenit velkost bloku za jazdy, ale riesenie by bolo aj pouzit LVM a postupne "prelievat" data do noveho file systemu ... samozrejme ak je to mozne

[Petr Maleček]

FS je přímo v samotném RAIDu (tzn. není to LVM).

[Sten]

To máte problém s velikostí někde jinde:

ext4 single file limit: 16 TiB (for 4 KiB block filesystem)
ext4 file system limit: 1 EiB (for 4 KiB block filesystem)

[Robo]

malo RAM ?

[Petr Šobáň]

To by na to nemělo mít vliv ne ?

[Petr Maleček]

2GB RAM, 1GB SWAP

[Lukas]

Muzete popsat problem na ktery jste narazil trochu lepe ? O Limit velikosti souboroveho system urcite nejde.

Velikost bloku je omezena velikost stranky coz je u "normalnich" architektur 4kB (predpokladam ze i u vas).

Verze jadra ?

[Lukas]

No jo placam, architekturni omezeni byva mnohem vyssi (>2M). Kazdopadne ext4 neni pripraven pro pouziti hugepages.

[Petr Maleček]

Na netu jsem našel toto ... otázkou je, zda je to opravu příčina.

[Heron]

Při vytváření mkfs.ext4 vypisuje maximální velikost fs v daných podmínkách (architektura, verze fs toolsů apod).

Například u mě:

Block size=4096 (log=2)
Maximum filesystem blocks=2147483648

Maximální velikost ext4 FS je tedy v mém případě 8TiB. Zkus to u sebe, co ti napíše mkfs.ext4 s parametrem -n na tom stejném oddílu.

-n Causes mke2fs to not actually create a filesystem, but display what it would do if it were to create a filesystem. This can be used to determine the location of the backup superblocks for a particu- lar filesystem, so long as the mke2fs parameters that were passed when the filesystem was originally created are used again. (With the -n option added, of course!)

[Petr Maleček]

Omlouvám se za pozdní reakci -

mkfs.ext4 -n /dev/md0
mke2fs 1.41.11 (14-Mar-2010)
Jmenovka systému souborů=
Typ OS: Linux
Velikost bloku=4096 (log=2)
Velikost fragmentu=4096 (log=2)
Stride=16 blocks, Stripe width=48 blocks
274718720 iuzlů, 1098851952 bloků
54942597 bloků (5.00 %) rezervováno pro superuživatele
První blok dat=0
Maximum bloků v systému souborů=4294967296
33535 skupin bloků
32768 bloků ve skupině, 32768 fragmentů ve skupině
8192 iuzlů ve skupině
Zálohy superbloku uloženy v blocích:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848, 512000000, 550731776, 644972544

Verze jádra : Linux matrioska 2.6.32-27-server #49-Ubuntu SMP Thu Dec 2 02:05:21 UTC 2010 x86_64 GNU/Linux

[Jendа]

Podle tohoto by maximální velikost FS měla být 16 TiB. Jak se projevuje ten problém „nelze zvětšit“? resize2fs si na něco stěžuje?

[Petr Maleček]

Příloha:

• free.PNG (8670 bytů)

df píše:

Filesystem           1K-blocks      Used Available Use% Mounted on
...
/dev/md0             4326436704 1874595336 2451841368  44% /home

resize2fs píše:

resize2fs 1.41.11 (14-Mar-2010)
Souborový systém již je dlouhý 1098851952 bloků. Není co dělat!

Samba hlásí ve Windows - velikost disku 4.02TB.

Ale teď mi tedy napadá, jestli fakt není jenom "problém" v jednotkách. Mám tam 4x1.5TB disk v RAID5, čili 3x1.5TB = 4.5TB, což by reálu asi mohlo i těch 4.02TB být, nebo se pletu ?

[Jendа]

Napsal bych něco ostrého na adresu software, který říká TB a myslí tím TiB, ale nechám si to od cesty. Mrkni do /proc/partitions, kolik (u mě) 1KiB bloků které zařízení skutečně má. Možná tu totiž celou dobu řešíme problém vzniklý bordelem, který už před 12 lety vyřešilo IEC 60027-2. Mně to totiž píše to stejné i na prťavém /boot, který určitě limitů ext2/3/4 nedosáhl.

resize2fs 1.41.12 (17-May-2010)
Souborový systém již je dlouhý 104388 bloků. Není co dělat!

[Heron]

No já myslím, že je otázka vyřešena.

Jednotky, výrobci HW počítají v násobkách 1000 (10^3), zatímco programy to zobrazují jako násobky 1024(2^10).

4.5*10^9 (4.5TB) = 4.2*2^40 (4.2TiB)

[Petr Maleček]

No, 4.2TiB, ale ne 4.02 :(

[Petr Maleček]

Asi takto:

cat /proc/partitions
major minor  #blocks  name

   8        0  390711384 sda
   8        1     248976 sda1
   8        2  389455762 sda2
   8        3    1004062 sda3
   8       32 1465138584 sdc
   8       33 1465136001 sdc1
   8       48 1465138584 sdd
   8       49 1465136001 sdd1
   8       16 1465138584 sdb
   8       17 1465136001 sdb1
   9        0 4395407808 md0
   8       64 1465138584 sde
   8       65 1465136001 sde1

[Jendа]

Takže co tedy řešíme? Ten FS je dlouhý 4500897595392 B = 4,5 TB, blokové zařízení pod ním také 4500897595392 B.

@#$%^&*&#!!!

[Petr Maleček]

Je to tak, díky, ... trklo mi to asi dva dny po položení tohoto dotazu, že to vlastně bude správně.