abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 00:11 | Nová verze

    Open source modální textový editor Helix, inspirovaný editory Vim, Neovim či Kakoune, byl vydán ve verzi 25.07. Přehled novinek se záznamy terminálových sezení v asciinema v oznámení na webu. Detailně v CHANGELOGu na GitHubu.

    Ladislav Hagara | Komentářů: 0
    včera 20:44 | IT novinky

    Americký výrobce čipů Nvidia získal od vlády prezidenta Donalda Trumpa souhlas s prodejem svých pokročilých počítačových čipů používaných k vývoji umělé inteligence (AI) H20 do Číny. Prodej těchto čipů speciálně upravených pro čínský trh by tak mohl být brzy obnoven, uvedla firma na svém blogu. Americká vláda zakázala prodej v dubnu, v době eskalace obchodního sporu mezi oběma zeměmi. Tehdy to zdůvodnila obavami, že by čipy mohla využívat čínská armáda.

    Ladislav Hagara | Komentářů: 1
    včera 17:22 | Nová verze

    3D software Blender byl vydán ve verzi 4.5 s prodlouženou podporou. Podrobnosti v poznámkách k vydání. Videopředstavení na YouTube.

    Ladislav Hagara | Komentářů: 0
    14.7. 22:22 | Komunita

    Open source webový aplikační framework Django slaví 20. narozeniny.

    Ladislav Hagara | Komentářů: 0
    14.7. 16:11 | Komunita

    V Brestu dnes začala konference vývojářů a uživatelů linuxové distribuce Debian DebConf25. Na programu je řada zajímavých přednášek. Sledovat je lze online.

    Ladislav Hagara | Komentářů: 0
    14.7. 11:33 | IT novinky

    Před 30 lety, tj. 14. července 1995, se začala používat přípona .mp3 pro soubory s hudbou komprimovanou pomocí MPEG-2 Audio Layer 3.

    Ladislav Hagara | Komentářů: 26
    14.7. 10:55 | IT novinky

    Výroba 8bitových domácích počítačů Commodore 64 byla ukončena v dubnu 1994. Po více než 30 letech byl představen nový oficiální Commodore 64 Ultimate (YouTube). S deskou postavenou na FPGA. Ve 3 edicích v ceně od 299 dolarů a plánovaným dodáním v říjnu a listopadu letošního roku.

    Ladislav Hagara | Komentářů: 20
    13.7. 17:55 | Zajímavý projekt

    Společnost Hugging Face ve spolupráci se společností Pollen Robotics představila open source robota Reachy Mini (YouTube). Předobjednat lze lite verzi za 299 dolarů a wireless verzi s Raspberry Pi 5 za 449 dolarů.

    Ladislav Hagara | Komentářů: 17
    11.7. 16:44 | Komunita

    Dnes v 17:30 bude oficiálně vydána open source počítačová hra DOGWALK vytvořena v 3D softwaru Blender a herním enginu Godot. Release party proběhne na YouTube od 17:00.

    Ladislav Hagara | Komentářů: 3
    11.7. 14:55 | Humor

    McDonald's se spojil se společností Paradox a pracovníky nabírá také pomocí AI řešení s virtuální asistentkou Olivii běžící na webu McHire. Ian Carroll a Sam Curry se na toto AI řešení blíže podívali a opravdu je překvapilo, že se mohli přihlásit pomocí jména 123456 a hesla 123456 a získat přístup k údajům o 64 milionech uchazečů o práci.

    Ladislav Hagara | Komentářů: 16
    Jaký je váš oblíbený skriptovací jazyk?
     (59%)
     (26%)
     (7%)
     (3%)
     (1%)
     (1%)
     (4%)
    Celkem 399 hlasů
     Komentářů: 16, poslední 8.6. 21:05
    Rozcestník

    Dotaz: Indexování v baloo

    29.7.2022 14:46 lertimir | skóre: 64 | blog: Par_slov
    Indexování v baloo
    Přečteno: 332×
    Možná jsem jeden z mála, kteří indexují v KDE s baloo. Ale zatím jsem byl spokojen. Nicméně dnes mi začalo padat automatické zálohování a když jsem zjišťoval proč dostal jsem se až k baloo indexu a tomuto číslu
    ls -l ~/.local/share/baloo/
    celkem 25567864
    -rw-r--r-- 1 palovsky palovsky 18102980400611328 29. čec 14.39 index
    -rw-r--r-- 1 palovsky palovsky              8192 29. čec 14.39 index-lock
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    Odpovědi

    Max avatar 29.7.2022 15:20 Max | skóre: 72 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Větší soubor, než je kapacita, není problém. Příklad vytvoření prázdného souboru:
    # velikost volume
    df -h
    ...
    /dev/mapper/system                   230G  221G  8,4G  97% /home
    ...
    
    # vytvoříme prázdný soubor o velikosti 5TB
    truncate -s 5T /home/test.img
    
    # ověříme, že má 5TB
    du -bhc /home/test.img
    5,0T    /home/test.img
    5,0T    celkem
    
    # koukneme přes ls
    ls -l /home/test.img
    -rw-r--r-- 1 max max 5497558138880 29. čec 15.16 /home/test.img
    
    # smažeme
    rm -f /home/test.img
    
    Nemusí tedy nutně jít o chybu na filesystému. Může se jednat i o nějaký bug v Baloo.
    Zdar Max
    Měl jsem sen ... :(
    29.7.2022 15:23 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Proč to Baloo dělá, to opravdu nevím. Určitě by to šlo nazvat chybou v Baloo.

    Co se týče velikosti souboru, tak jde o to, že soubor může být větší než je diskový prostor (souborový systém řeší to, že je v souboru tzv. díra). Ve skutečnosti se na disk ukládá jenom ta část souboru, která neobsahuje nuly.

    Zkusil bych index smazat a nechat Baloo naindexovat soubory znovu.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    29.7.2022 16:24 Peter Golis | skóre: 65 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Rozumie si to zálohovanie s deravými súbormi (sparse files)? Odporučil by som skontrolovať skutočnú veľkosť:

    du -sh ~/.local/share/baloo/index

    30.7.2022 10:49 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Tazatel píše, že je soubor větší než FS, takže je určitě děravý. Netuším, proč Baloo dělá děravý soubor, který je tak absurdně velký.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    30.7.2022 11:49 Peter Golis | skóre: 65 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Ja som sa nepýtal na to, či je ten súbor deravý, pýtal som sa či si to jeho zálohovanie rozumie s deravými súbormi. Možno mu len chýba parameter --sparse=allways pri príkaze cp.
    29.7.2022 20:21 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    To↑ jsou hned dva nesmysly v jednom odstavci. Udávaná velikost souboru přece nemusí nijak souviset s velikostí diskového prostoru. Existují řídké soubory, podobně jako existuje řídká stolice.

    Každopádně, automatické zálohování nikdy nesmí kvůli řídkým souborům padat; musí si s nimi umět korektně poradit, tj. (1) detekovat a zachovat mezery v souborech a případně (2) z už alokovaných nulových bloků vytvořit nové mezery.

    Takže na úvod a především bych zkontroloval (a raději zahodil a nahradil) onen automatický zálohovací mechanismus, který je zjevně rozbitý a neporadí si s obyčejným řídkým souborem. Já mám například na 2 TB SSD cca dvacet virtuálek a každá z nich má virtuální disk o (neméně virtuální) velikosti 1 až 10 TB. Jakpak se tam asi vejdou? Jakpak se asi zálohují? Inu, normálně; řídké soubory jsou úplně běžná věc. (Rozumné atomické zálohování typu btrfs send / btrfs receive s nimi pracuje bez problémů a na úrovni souborového API s nimi umí pracovat třeba rsync.)

    K původnímu problému: Ano, Baloo je zabugovaný odpad, kterému je dobré se vyhnout. :-) Moje hypotéza ohledně toho, co se stalo: Zase se projevil jeden z mnoha bugů, nějaké číslo přeteklo či podteklo, nastal lseek64() do ohromné dálky a následně pak pár zápisů v té ohromné dálce. Což bohužel samozřejmě uspělo, protože … řídké soubory jsou běžná věc.

    29.7.2022 20:38 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo

    Tak schválně, jestlipak mám 8 exabytů minus 1 byte „místa“, jo? A navíc klidně dvakrát.

    $ truncate -s 9223372036854775807 huge
    
    $ du -shb huge
    9223372036854775807	huge
    
    $ du -sh huge
    0	huge
    
    $ cp huge also_huge
    
    $ du -shb huge also_huge
    9223372036854775807	huge
    9223372036854775807	also_huge
    
    $ du -sh huge also_huge
    0	huge
    0	also_huge
    
    $ rm huge also_huge
    
    29.7.2022 23:11 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Dík za poslední odstavec, to ostatní vím a se sparse soubory pracuji, jen jsem nikdy nepotkal standardně vytvořený soubor jehož velikost je skoro 1 000 000 krát větší než je alokovaný prostor. Soubor má skutečně alokovaných 23GB a tváří se 18PB.
    5.8.2022 07:27 David
    Rozbalit Rozbalit vše Re: Indexování v baloo
    V jedné chybě na bugs.kde.org vývojář psal o zmenšování Baloo index souboru pomocí mdb_copy -n -c index index.new.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.