abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 04:00 | Komunita

    Před necelými čtyřmi měsíci byl Steven Deobald jmenován novým výkonným ředitelem GNOME Foundation. Včera skončil, protože "nebyl pro tuto roli v tento čas ten pravý".

    Ladislav Hagara | Komentářů: 5
    včera 18:33 | Zajímavý článek

    Nové číslo časopisu Raspberry Pi zdarma ke čtení: Raspberry Pi Official Magazine 156 (pdf).

    Ladislav Hagara | Komentářů: 0
    včera 15:11 | Nová verze

    Armbian, tj. linuxová distribuce založená na Debianu a Ubuntu optimalizovaná pro jednodeskové počítače na platformě ARM a RISC-V, ke stažení ale také pro Intel a AMD, byl vydán ve verzi 25.8.1. Přehled novinek v Changelogu.

    Ladislav Hagara | Komentářů: 0
    včera 12:11 | IT novinky

    Včera večer měl na YouTube premiéru dokumentární film Python: The Documentary | An origin story.

    Ladislav Hagara | Komentářů: 0
    28.8. 23:33 | Nová verze

    Společnost comma.ai po třech letech od vydání verze 0.9 vydala novou verzi 0.10 open source pokročilého asistenčního systému pro řidiče openpilot (Wikipedie). Zdrojové kódy jsou k dispozici na GitHubu.

    Ladislav Hagara | Komentářů: 0
    28.8. 21:55 | Nová verze Ladislav Hagara | Komentářů: 2
    28.8. 14:11 | IT novinky

    Řada vestavěných počítačových desek a vývojových platforem NVIDIA Jetson se rozrostla o NVIDIA Jetson Thor. Ve srovnání se svým předchůdcem NVIDIA Jetson Orin nabízí 7,5krát vyšší výpočetní výkon umělé inteligence a 3,5krát vyšší energetickou účinnost. Softwarový stack NVIDIA JetPack 7 je založen na Ubuntu 24.04 LTS.

    Ladislav Hagara | Komentářů: 4
    28.8. 00:44 | Bezpečnostní upozornění

    Národní úřad pro kybernetickou a informační bezpečnost (NÚKIB) spolu s NSA a dalšími americkými úřady upozorňuje (en) na čínského aktéra Salt Typhoon, který kompromituje sítě po celém světě.

    Ladislav Hagara | Komentářů: 26
    27.8. 16:33 | IT novinky

    Společnost Framework Computer představila (YouTube) nový výkonnější Framework Laptop 16. Rozhodnou se lze například pro procesor Ryzen AI 9 HX 370 a grafickou kartu NVIDIA GeForce RTX 5070.

    Ladislav Hagara | Komentářů: 1
    27.8. 14:22 | IT novinky

    Google oznamuje, že na „certifikovaných“ zařízeních s Androidem omezí instalaci aplikací (včetně „sideloadingu“) tak, že bude vyžadovat, aby aplikace byly podepsány centrálně registrovanými vývojáři s ověřenou identitou. Tato politika bude implementována během roku 2026 ve vybraných zemích (jihovýchodní Asie, Brazílie) a od roku 2027 celosvětově.

    Fluttershy, yay! | Komentářů: 11
    Pro otevření více webových stránek ve webovém prohlížečí používám
     (79%)
     (9%)
     (3%)
     (4%)
     (5%)
     (1%)
    Celkem 111 hlasů
     Komentářů: 9, poslední 28.8. 11:53
    Rozcestník

    Dotaz: Indexování v baloo

    29.7.2022 14:46 lertimir | skóre: 64 | blog: Par_slov
    Indexování v baloo
    Přečteno: 335×
    Možná jsem jeden z mála, kteří indexují v KDE s baloo. Ale zatím jsem byl spokojen. Nicméně dnes mi začalo padat automatické zálohování a když jsem zjišťoval proč dostal jsem se až k baloo indexu a tomuto číslu
    ls -l ~/.local/share/baloo/
    celkem 25567864
    -rw-r--r-- 1 palovsky palovsky 18102980400611328 29. čec 14.39 index
    -rw-r--r-- 1 palovsky palovsky              8192 29. čec 14.39 index-lock
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    Odpovědi

    Max avatar 29.7.2022 15:20 Max | skóre: 72 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Větší soubor, než je kapacita, není problém. Příklad vytvoření prázdného souboru:
    # velikost volume
    df -h
    ...
    /dev/mapper/system                   230G  221G  8,4G  97% /home
    ...
    
    # vytvoříme prázdný soubor o velikosti 5TB
    truncate -s 5T /home/test.img
    
    # ověříme, že má 5TB
    du -bhc /home/test.img
    5,0T    /home/test.img
    5,0T    celkem
    
    # koukneme přes ls
    ls -l /home/test.img
    -rw-r--r-- 1 max max 5497558138880 29. čec 15.16 /home/test.img
    
    # smažeme
    rm -f /home/test.img
    
    Nemusí tedy nutně jít o chybu na filesystému. Může se jednat i o nějaký bug v Baloo.
    Zdar Max
    Měl jsem sen ... :(
    29.7.2022 15:23 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Proč to Baloo dělá, to opravdu nevím. Určitě by to šlo nazvat chybou v Baloo.

    Co se týče velikosti souboru, tak jde o to, že soubor může být větší než je diskový prostor (souborový systém řeší to, že je v souboru tzv. díra). Ve skutečnosti se na disk ukládá jenom ta část souboru, která neobsahuje nuly.

    Zkusil bych index smazat a nechat Baloo naindexovat soubory znovu.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    29.7.2022 16:24 Peter Golis | skóre: 65 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Rozumie si to zálohovanie s deravými súbormi (sparse files)? Odporučil by som skontrolovať skutočnú veľkosť:

    du -sh ~/.local/share/baloo/index

    30.7.2022 10:49 jiwopene | skóre: 31 | blog: Od každého trochu…
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Tazatel píše, že je soubor větší než FS, takže je určitě děravý. Netuším, proč Baloo dělá děravý soubor, který je tak absurdně velký.
    .sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
    30.7.2022 11:49 Peter Golis | skóre: 65 | blog: Bežné záležitosti | Bratislava
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Ja som sa nepýtal na to, či je ten súbor deravý, pýtal som sa či si to jeho zálohovanie rozumie s deravými súbormi. Možno mu len chýba parameter --sparse=allways pri príkaze cp.
    29.7.2022 20:21 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Jo, je to několika tisíckrát více než mám celý diskový prostor a pochopitelně to žádná záloha neudělá. Nerozumí tomu někdo?

    To↑ jsou hned dva nesmysly v jednom odstavci. Udávaná velikost souboru přece nemusí nijak souviset s velikostí diskového prostoru. Existují řídké soubory, podobně jako existuje řídká stolice.

    Každopádně, automatické zálohování nikdy nesmí kvůli řídkým souborům padat; musí si s nimi umět korektně poradit, tj. (1) detekovat a zachovat mezery v souborech a případně (2) z už alokovaných nulových bloků vytvořit nové mezery.

    Takže na úvod a především bych zkontroloval (a raději zahodil a nahradil) onen automatický zálohovací mechanismus, který je zjevně rozbitý a neporadí si s obyčejným řídkým souborem. Já mám například na 2 TB SSD cca dvacet virtuálek a každá z nich má virtuální disk o (neméně virtuální) velikosti 1 až 10 TB. Jakpak se tam asi vejdou? Jakpak se asi zálohují? Inu, normálně; řídké soubory jsou úplně běžná věc. (Rozumné atomické zálohování typu btrfs send / btrfs receive s nimi pracuje bez problémů a na úrovni souborového API s nimi umí pracovat třeba rsync.)

    K původnímu problému: Ano, Baloo je zabugovaný odpad, kterému je dobré se vyhnout. :-) Moje hypotéza ohledně toho, co se stalo: Zase se projevil jeden z mnoha bugů, nějaké číslo přeteklo či podteklo, nastal lseek64() do ohromné dálky a následně pak pár zápisů v té ohromné dálce. Což bohužel samozřejmě uspělo, protože … řídké soubory jsou běžná věc.

    29.7.2022 20:38 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: Indexování v baloo

    Tak schválně, jestlipak mám 8 exabytů minus 1 byte „místa“, jo? A navíc klidně dvakrát.

    $ truncate -s 9223372036854775807 huge
    
    $ du -shb huge
    9223372036854775807	huge
    
    $ du -sh huge
    0	huge
    
    $ cp huge also_huge
    
    $ du -shb huge also_huge
    9223372036854775807	huge
    9223372036854775807	also_huge
    
    $ du -sh huge also_huge
    0	huge
    0	also_huge
    
    $ rm huge also_huge
    
    29.7.2022 23:11 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Indexování v baloo
    Dík za poslední odstavec, to ostatní vím a se sparse soubory pracuji, jen jsem nikdy nepotkal standardně vytvořený soubor jehož velikost je skoro 1 000 000 krát větší než je alokovaný prostor. Soubor má skutečně alokovaných 23GB a tváří se 18PB.
    5.8.2022 07:27 David
    Rozbalit Rozbalit vše Re: Indexování v baloo
    V jedné chybě na bugs.kde.org vývojář psal o zmenšování Baloo index souboru pomocí mdb_copy -n -c index index.new.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.