abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 05:33 | Komunita

    Richard Stallman dnes v Liberci přednáší o svobodném softwaru a svobodě v digitální společnosti. Od 16:30 v aule budovy G na Technické univerzitě v Liberci. V anglickém jazyce s automaticky generovanými českými titulky. Vstup je zdarma i pro širokou veřejnost.

    Ladislav Hagara | Komentářů: 12
    dnes 03:55 | Komunita

    sudo-rs, tj. sudo a su přepsáné do programovacího jazyka Rust, nahradí v Ubuntu 25.10 klasické sudo. V plánu je také přechod od klasických coreutils k uutils coreutils napsaných v Rustu.

    Ladislav Hagara | Komentářů: 0
    včera 22:11 | Nasazení Linuxu

    Fedora se stala oficiální distribucí WSL (Windows Subsystem for Linux).

    Ladislav Hagara | Komentářů: 2
    včera 13:22 | IT novinky

    Společnost IBM představila server IBM LinuxONE Emperor 5 poháněný procesorem IBM Telum II.

    Ladislav Hagara | Komentářů: 1
    včera 04:55 | Nová verze

    Byla vydána verze 4.0 multiplatformního integrovaného vývojového prostředí (IDE) pro rychlý vývoj aplikaci (RAD) ve Free Pascalu Lazarus (Wikipedie). Přehled novinek v poznámkách k vydání. Využíván je Free Pascal Compiler (FPC) 3.2.2.

    Ladislav Hagara | Komentářů: 1
    včera 00:33 | Komunita

    Podpora Windows 10 končí 14. října 2025. Připravovaná kampaň Konec desítek (End of 10) může uživatelům pomoci s přechodem na Linux.

    Ladislav Hagara | Komentářů: 32
    5.5. 23:22 | Pozvánky

    Již tuto středu proběhne 50. Virtuální Bastlírna, tedy dle římského číslování L. Bude L značit velikost, tedy více diskutujících než obvykle, či délku, neboť díky svátku lze diskutovat dlouho do noci? Bude i příští Virtuální Bastlírna virtuální nebo reálná? Nejen to se dozvíte, když dorazíte na diskuzní večer o elektronice, softwaru, ale technice obecně, který si můžete představit jako virtuální posezení u piva spojené s učenou

    … více »
    bkralik | Komentářů: 0
    5.5. 22:33 | IT novinky

    Dle plánu dnes končí služba Skype. Uživatelé mohou pokračovat v Microsoft Teams.

    Ladislav Hagara | Komentářů: 1
    5.5. 21:44 | IT novinky

    Český statistický úřad rozšiřuje Statistický geoportál o Datový portál GIS s otevřenými geografickými daty. Ten umožňuje stahování datových sad podle potřeb uživatelů i jejich prohlížení v mapě a přináší nové možnosti v oblasti analýzy a využití statistických dat.

    Ladislav Hagara | Komentářů: 2
    5.5. 12:33 | Zajímavý projekt

    Kevin Lin zkouší využívat chytré brýle Mentra při hraní na piano. Vytváří aplikaci AugmentedChords, pomocí které si do brýlí posílá notový zápis (YouTube). Uvnitř brýlí běží AugmentOS (GitHub), tj. open source operační systém pro chytré brýle.

    Ladislav Hagara | Komentářů: 1
    Jaký filesystém primárně používáte?
     (57%)
     (1%)
     (8%)
     (22%)
     (4%)
     (2%)
     (3%)
     (1%)
     (1%)
     (3%)
    Celkem 546 hlasů
     Komentářů: 24, poslední dnes 17:10
    Rozcestník

    Dotaz: Indexování v baloo

    29.7.2022 14:46 lertimir | skóre: 64 | blog: Par_slov
    Indexování v baloo
    Přečteno: 323×
    Možná jsem jeden z mála, kteří indexují v KDE s baloo. Ale zatím jsem byl spokojen. Nicméně dnes mi začalo padat automatické zálohování a když jsem zjišťoval proč dostal jsem se až k baloo indexu a tomuto číslu
    ls -l ~/.local/share/baloo/
    celkem 25567864
    -rw-r--r-- 1 palovsky palovsky 18102980400611328 29. čec 14.39 index
    -rw-r--r-- 1 palovsky palovsky              8192 29. čec 14.39 index-lock
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    Odpovědi

    Max avatar 29.7.2022 15:20 Max | skóre: 72 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Větší soubor, než je kapacita, není problém. Příklad vytvoření prázdného souboru:
    # velikost volume
    df -h
    ...
    /dev/mapper/system                   230G  221G  8,4G  97% /home
    ...
    
    # vytvoříme prázdný soubor o velikosti 5TB
    truncate -s 5T /home/test.img
    
    # ověříme, že má 5TB
    du -bhc /home/test.img
    5,0T    /home/test.img
    5,0T    celkem
    
    # koukneme přes ls
    ls -l /home/test.img
    -rw-r--r-- 1 max max 5497558138880 29. čec 15.16 /home/test.img
    
    # smažeme
    rm -f /home/test.img
    
    Nemusí tedy nutně jít o chybu na filesystému. Může se jednat i o nějaký bug v Baloo.
    Zdar Max
    Měl jsem sen ... :(
    29.7.2022 15:23 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Proč to Baloo dělá, to opravdu nevím. Určitě by to šlo nazvat chybou v Baloo.

    Co se týče velikosti souboru, tak jde o to, že soubor může být větší než je diskový prostor (souborový systém řeší to, že je v souboru tzv. díra). Ve skutečnosti se na disk ukládá jenom ta část souboru, která neobsahuje nuly.

    Zkusil bych index smazat a nechat Baloo naindexovat soubory znovu.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    29.7.2022 16:24 Peter Golis | skóre: 64 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Rozumie si to zálohovanie s deravými súbormi (sparse files)? Odporučil by som skontrolovať skutočnú veľkosť:

    du -sh ~/.local/share/baloo/index

    30.7.2022 10:49 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Tazatel píše, že je soubor větší než FS, takže je určitě děravý. Netuším, proč Baloo dělá děravý soubor, který je tak absurdně velký.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    30.7.2022 11:49 Peter Golis | skóre: 64 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Ja som sa nepýtal na to, či je ten súbor deravý, pýtal som sa či si to jeho zálohovanie rozumie s deravými súbormi. Možno mu len chýba parameter --sparse=allways pri príkaze cp.
    29.7.2022 20:21 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    To↑ jsou hned dva nesmysly v jednom odstavci. Udávaná velikost souboru přece nemusí nijak souviset s velikostí diskového prostoru. Existují řídké soubory, podobně jako existuje řídká stolice.

    Každopádně, automatické zálohování nikdy nesmí kvůli řídkým souborům padat; musí si s nimi umět korektně poradit, tj. (1) detekovat a zachovat mezery v souborech a případně (2) z už alokovaných nulových bloků vytvořit nové mezery.

    Takže na úvod a především bych zkontroloval (a raději zahodil a nahradil) onen automatický zálohovací mechanismus, který je zjevně rozbitý a neporadí si s obyčejným řídkým souborem. Já mám například na 2 TB SSD cca dvacet virtuálek a každá z nich má virtuální disk o (neméně virtuální) velikosti 1 až 10 TB. Jakpak se tam asi vejdou? Jakpak se asi zálohují? Inu, normálně; řídké soubory jsou úplně běžná věc. (Rozumné atomické zálohování typu btrfs send / btrfs receive s nimi pracuje bez problémů a na úrovni souborového API s nimi umí pracovat třeba rsync.)

    K původnímu problému: Ano, Baloo je zabugovaný odpad, kterému je dobré se vyhnout. :-) Moje hypotéza ohledně toho, co se stalo: Zase se projevil jeden z mnoha bugů, nějaké číslo přeteklo či podteklo, nastal lseek64() do ohromné dálky a následně pak pár zápisů v té ohromné dálce. Což bohužel samozřejmě uspělo, protože … řídké soubory jsou běžná věc.

    29.7.2022 20:38 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo

    Tak schválně, jestlipak mám 8 exabytů minus 1 byte „místa“, jo? A navíc klidně dvakrát.

    $ truncate -s 9223372036854775807 huge
    
    $ du -shb huge
    9223372036854775807	huge
    
    $ du -sh huge
    0	huge
    
    $ cp huge also_huge
    
    $ du -shb huge also_huge
    9223372036854775807	huge
    9223372036854775807	also_huge
    
    $ du -sh huge also_huge
    0	huge
    0	also_huge
    
    $ rm huge also_huge
    
    29.7.2022 23:11 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Dík za poslední odstavec, to ostatní vím a se sparse soubory pracuji, jen jsem nikdy nepotkal standardně vytvořený soubor jehož velikost je skoro 1 000 000 krát větší než je alokovaný prostor. Soubor má skutečně alokovaných 23GB a tváří se 18PB.
    5.8.2022 07:27 David
    Rozbalit Rozbalit vše Re: Indexování v baloo
    V jedné chybě na bugs.kde.org vývojář psal o zmenšování Baloo index souboru pomocí mdb_copy -n -c index index.new.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.