abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 04:00 | Zajímavý software

    Open source reimplementace počítačových her Tomb Raider I a Tomb Raider II spolu s dalšími vylepšeními a opravami chyb TRX byla vydána ve verzi 1.0. Jedná se o sloučení projektů / enginů TR1X a TR2X do jednoho TRX. Videoukázka na YouTube.

    Ladislav Hagara | Komentářů: 0
    včera 17:00 | IT novinky

    Společnost Seznam.cz spouští konverzační nástroj založený na umělé inteligenci Seznam Asistent. Asistent využívá vlastní jazykový model SeLLMa a dočasně i komerční modely od OpenAI provozované v evropských datacentrech prostřednictvím Microsoft Azure. Dlouhodobým cílem Seznamu je provozovat Asistenta výhradně na interních jazykových modelech a ve vlastních datových centrech.

    Ladislav Hagara | Komentářů: 3
    včera 11:55 | Zajímavý software

    Software LibrePods osvobozuje bezdrátová sluchátka AirPods z ekosystému Applu. Exkluzivní funkce AirPods umožňuje využívat na Androidu a Linuxu. Díky zdokumentování proprietárního protokolu AAP (Apple Accessory Protocol).

    Ladislav Hagara | Komentářů: 0
    včera 05:00 | Nová verze

    Byl vydán AlmaLinux OS 10.1 s kódovým názvem Heliotrope Lion. S podporou Btrfs. Podrobnosti v poznámkách k vydání.

    Ladislav Hagara | Komentářů: 0
    včera 04:33 | Komunita

    Placená služba prohledávání zprostředkovatelů dat a automatického odstraňování uniklých osobních údajů Mozilla Monitor Plus bude 17. prosince ukončena. Bezplatná monitorovací služba Mozilla Monitor bude i nadále poskytovat okamžitá upozornění a podrobné pokyny k omezení rizik úniku dat. Služba Mozilla Monitor Plus byla představena v únoru loňského roku.

    Ladislav Hagara | Komentářů: 0
    24.11. 22:44 | Nová verze

    Waydroid (Wikipedie, GitHub) byl vydán v nové verzi 1.6.0. Waydroid umožňuje spouštět aplikace pro Android na běžných linuxových distribucích. Běhové prostředí vychází z LineageOS.

    Ladislav Hagara | Komentářů: 3
    24.11. 15:44 | Nová verze

    Příspěvek na blogu Raspberry Pi představuje novou kompletně přepracovanou verzi 2.0 aplikace Raspberry Pi Imager (YouTube) pro stažení, nakonfigurování a zapsání obrazu operačního systému pro Raspberry Pi na SD kartu. Z novinek lze vypíchnout volitelnou konfiguraci Raspberry Pi Connect.

    Ladislav Hagara | Komentářů: 3
    24.11. 11:22 | Nová verze

    Memtest86+ (Wikipedie), svobodný nástroj pro kontrolu operační paměti, byl vydán ve verzi 8.00. Přináší podporu nejnovějších procesorů Intel a AMD nebo také tmavý režim.

    Ladislav Hagara | Komentářů: 0
    24.11. 10:55 | Nová verze

    Programovací jazyk Racket (Wikipedie), tj. jazyk z rodiny jazyků Lisp a potomek jazyka Scheme, byl vydán v nové major verzi 9.0. Hlavní novinku jsou paralelní vlákna (Parallel Threads).

    Ladislav Hagara | Komentářů: 0
    24.11. 10:11 | Komunita

    Před šesti týdny bylo oznámeno, že Qualcomm kupuje Arduino. Minulý týden byly na stránkách Arduina aktualizovány podmínky používání a zásady ochrany osobních údajů. Objevily se obavy, že by otevřená povaha Arduina mohla být ohrožena. Arduino ubezpečuje, že se nic nemění a například omezení reverzního inženýrství v podmínkách používání se týká pouze SaaS cloudové aplikace.

    Ladislav Hagara | Komentářů: 0
    Jaké řešení používáte k vývoji / práci?
     (35%)
     (46%)
     (19%)
     (18%)
     (22%)
     (15%)
     (23%)
     (16%)
     (17%)
    Celkem 400 hlasů
     Komentářů: 17, poslední 19.11. 21:57
    Rozcestník

    Dotaz: Hromadné zjištění kódování souborů

    3.4.2015 16:25 Marek
    Hromadné zjištění kódování souborů
    Přečteno: 409×
    Ahoj, poradí nějaký profík prosím jak zjistit z příkazové řádky kódování souboru ? Potřebuji zkontrolovat cca 8000 souborů zda mají kódování UTF-8. Děkuji za pomoc. M.

    Odpovědi

    Jendа avatar 3.4.2015 16:45 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    Někdy to řekne příkaz file, jinak bych zkoušel detekovat četnost jednotlivých znaků pokud znáš alespoň jazyk/rodinu jazyků. A pak to můžeš zkusit jako UTF8 dekódovat jestli to bude validní. Ale obecně taková věc udělat nejde.
    3.4.2015 16:56 Jindřich Makovička | skóre: 17
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    iconv -f utf-8 -t ucs-4 filename.txt > /dev/null

    pokud ve filename.txt není validní utf8, iconv vrátí chybu
    3.4.2015 16:57 Masca
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    enca (např. v Debianu je v repozitáři)
    alles32 avatar 3.4.2015 17:57 alles32 | skóre: 15 | Evropa
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    pic.

    tohle zobrazi vsechny ne utf-8 soubory v aktualnim adresari.

    $ find . -type f | xargs -I '{}' bash -c "iconv -f utf-8 -t utf-16 '{}' &>/dev/null || echo '{}'"
    wamba avatar 4.4.2015 04:37 wamba | skóre: 38 | blog: wamba
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    pomocí Perlu s příslušnou knihovnou
    find .|perl -MFile::LibMagic -nE 'chomp; my @coding= ("utf-8","us-ascii");my $magic = File::LibMagic->new();  say  $_ if ! $magic->info_from_filename("$_")->{encoding} ~~ @coding'
    
    zkoušel jsem to na cca 15k souborech(i s netextovými 17k) a trvalo to nějakých 30s.(problém dělali symlinky na nexistující soubory, u těch to házelo chybu)
    This would have been so hard to fix when you don't know that there is in fact an easy fix.
    alles32 avatar 4.4.2015 07:48 alles32 | skóre: 15 | Evropa
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    find zna file -type. '-type f' odfiltruje vse krom normalniho souboru ;].
    4.4.2015 11:40 Marek
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    Moc děkuji všem za tipy. Použil jsem kompletní řešení od alles32. Projde to celý strom což je super. Snažil jsem se to použít jen na php soubory a sustit příkaz odkudkoli ale nedaří se...
    $ find . -type f /var/www/*.php | xargs -I '{}' bash -c "iconv -f utf-8 -t utf-16 '{}' &>/dev/null || echo '{}'"
    alles32 avatar 4.4.2015 12:53 alles32 | skóre: 15 | Evropa
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    find umi -name. odkudkoli to jde taky, jen to chce zamenit cestu kde se ma findovat, napr.
    ~$ find /var/www -name *php -type f ......
    4.4.2015 13:09 chrono
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    Nemá ísť to *php do apostrofov?
    4.4.2015 15:25 Kit | skóre: 46 | Brno
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    ~$ find /var/www -name "*.php" -type f ......
    Komentáře označují místa, kde programátor udělal chybu nebo něco nedodělal.
    4.4.2015 18:01 Radovan Garabik
    Rozbalit Rozbalit vše Re: Hromadné zjištění kódování souborů
    man isutf8:

    isutf8 - check whether files are valid UTF-8

    Balíček moreutils.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.