abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

dnes 00:33 | IT novinky

Josef Průša představil na Maker Faire v New Yorku svou novou 3D tiskárnu Original Prusa i3 MK3. Z novinek (YouTube) lze zdůraznit senzor filamentu, výměnnou magnetickou podložku, rychlejší tisk nebo rozpoznání uskočené vrstvy, výpadku napájení a výpadku filamentu (YouTube).

Ladislav Hagara | Komentářů: 2
včera 17:22 | Komunita

Martin Flöser představil na svém blogu projekt XFree KWin. Cílem projektu je rozběhnout správce oken KWin na Waylandu bez XWaylandu [reddit].

Ladislav Hagara | Komentářů: 2
včera 16:55 | Komunita

Do pátku 29. září probíhá v Praze v hotelu Hilton konference SUSECON 2017 pořádaná společností SUSE. Dění na konferenci lze sledovat na Twitteru. Nils Brauckmann, CEO společnosti SUSE, vítá účastníky konference na YouTube.

Ladislav Hagara | Komentářů: 2
včera 07:00 | Komunita

Příspěvek na blogu společnosti Yubico informuje o začlenění podpory bezpečnostních klíčů FIDO U2F do Firefoxu Nightly. Dosud bylo možné dvoufázové ověření pomocí FIDO U2F ve Firefoxu zajistit pouze pomocí doplňku.

Ladislav Hagara | Komentářů: 3
včera 06:00 | Humor

Adobe PSIRT (Adobe Product Security Incident Response Team) neúmyslně zveřejnil (archive) na svém blogu svůj soukromý OpenPGP klíč. Klíč byl revokován a vygenerován nový. Nelze nezmínit xkcd 1553 - Veřejný klíč.

Ladislav Hagara | Komentářů: 1
24.9. 20:00 | Nová verze

Byla vydána (cgit) verze 0.99 svobodného nelineárního video editoru Pitivi. Jedná se o release candidate verze 1.0. Přehled úkolů, které je nutno ještě dodělat, na Phabricatoru. Pitivi je k dispozici také ve formátu Flatpak.

Ladislav Hagara | Komentářů: 0
24.9. 17:11 | Komunita

Microsoft s Canonicalem představili linuxové jádro Ubuntu optimalizováno pro cloudové služby Microsoft Azure (linux-azure). Jako výchozí je toto menší a výkonnější jádro použito již v Ubuntu Cloud Images for Ubuntu 16.04 LTS. Canonical zatím nenabízí patchování tohoto jádra za běhu systému (Canonical Livepatch Service).

Ladislav Hagara | Komentářů: 1
24.9. 14:55 | Komunita

Facebook oznámil, že přelicencuje open source projekty React, Jest, Flow a Immutable.js ze své vlastní kontroverzní licence BSD+Patents na licenci MIT. Stane se tak tento týden s vydáním Reactu 16. Jedním z důvodů přelicencování bylo oznámení nadace Apache, že software pod Facebook BSD+Patents licencí nesmí být součástí produktů pod touto nadací [Hacker News].

Ladislav Hagara | Komentářů: 0
23.9. 21:44 | Nová verze

Po půl roce od vydání verze 9.0 byla vydána verze 10.0 open source alternativy GitHubu, tj. softwarového nástroje s webovým rozhraním umožňujícího spolupráci na zdrojových kódech, GitLab (Wikipedie). Představení nových vlastností v příspěvku na blogu a na YouTube.

Ladislav Hagara | Komentářů: 0
22.9. 18:11 | Nová verze

Společnost Oracle oficiálně oznámila vydání Java SE 9 (JDK 9), Java Platform Enterprise Edition 8 (Java EE 8) a Java EE 8 Software Development Kit (SDK). Java SE 9 přináší více než 150 nových vlastností.

Ladislav Hagara | Komentářů: 0
Těžíte nějakou kryptoměnu?
 (5%)
 (3%)
 (17%)
 (75%)
Celkem 576 hlasů
 Komentářů: 23, poslední 24.9. 18:12
    Rozcestník

    Dotaz: Zjisteni velikosti souboru v C

    tomes.io avatar 22.7.2014 14:57 tomes.io | skóre: 12 | blog: tomesh
    Zjisteni velikosti souboru v C
    Přečteno: 648×
    Ahoj,

    potykam se s nasledujicim problemem. V rozsahlejsim programu mam fci, ktera ma vypsat velikost souboru. Dostane na vstup cestu (path) zjisti velikost a vypise, a to dvema zpusoby. Jednak pomoci fseek a ftell a jednak pomoci stat :
    void find_size(char *path)
    {
    	long data_size;
    	FILE *fr;
    
    	printf("path is:%s\n", path);
    
    	fr = fopen(path, "rb");
            if(fr == NULL) {
                printf("File can not be opened\n");
                exit(1);
    	}
        
    	//obtain a size of a file	
            fseek(fr,0,SEEK_END);
            data_size = ftell(fr);
            rewind(fr);
    
    	printf("File size: %ld bytes\n", data_size);
    
    	struct stat st;
    	
    	if (stat(path, &st) == -1) {
                perror("stat");
                exit(EXIT_FAILURE);
            }
    	
    	printf("File size(stat):%d bytes\n", (int)st.st_size);
    
            fclose(fr);
    	free(path);
    }
    
    Problem je v tom, ze v mem programu nefunguje (rozumej vzdy je velikost nulova), ackoliv kdyz k ni vymyslim pokusny program, ktery simuluje pruchod path od jejiho vzniku pomoci asprinf, skrze jeste jednu fci handle (ktera je v mem programu) tak to funguje bez problemu (vypise se spravna velikost):
    void find_size(char *path)
    {
    	long data_size;
    	FILE *fr;
    
    	printf("path is: %s\n", path);
    
    	fr = fopen(path, "rb");
            if(fr == NULL) {
                printf("File can not be opened\n");
                exit(1);
    	}
        
    	//obtain a size of a file	
            fseek(fr,0,SEEK_END);
            data_size = ftell(fr);
            rewind(fr);
    
    	printf("File size: %ld bytes\n", data_size);
    
    	struct stat st;
    	
    	if (stat(path, &st) == -1) {
                perror("stat");
                exit(EXIT_FAILURE);
            }
    	
    	
    	printf("File size(stat):%d bytes\n", (int)st.st_size);
    
            fclose(fr);
    	free(path);
    }
    
    void handle(char *path)
    {
    	find_size(path);
    }
    
    int main(int argc, char **argv)
    {	
    	char *path;
    	asprintf(&path, "%s/%s","./cli", "data");
    	handle(path);
    
    	return 0;
    }
    
    Nechapu, jak stejny kus kodu muze jednou fungovat a v jinem programu nefungovat. Pokazde vypisuje promennou path korektne, takze path cestu k souboru obsahuje. fopen mi chybu nehazi, jen zjisteni velikosti (neprazdneho) souboru je v pripade pokusne simulace korektni, v pripade stejne fce v jinem programu vzdy nula. Opravdy nevim, proc se to takto chova, na vstup dostane vzdy to stejne. Kdyby me nekdo nasmeroval, budu rad.

    Odpovědi

    22.7.2014 15:19 Sten
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    fseek může skončit chybou, bylo by vhodné to testovat. Jinak žádnou chybu tam nevidím, takže bych to tipoval na chybu někde jinde v programu. Nebo to zkoušíte na něčem, co není blokový soubor.

    Mimochodem která velikost je nulová? Ta vrácená ftell, ta vrácená stat nebo obě?
    22.7.2014 15:47 jekub
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Podle příkladu č. 2 je cesta k souboru "./cli/data". Pokud v obou případech vypíše stejnou cestu a různé výsledky... je v obou případech stejný adresář "."?
    tomes.io avatar 23.7.2014 16:19 tomes.io | skóre: 12 | blog: tomesh
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    ano, adresar je stejny. jak pokusnou simulaci tak i ostry program spoustim ve stejnem adreasi, obsahujici podadresar cli. fce pokazde vypisuje promennou path pred volanim fopen a pokazde se vypise stejne. jen vysledky jsou jine.
    Jardík avatar 22.7.2014 19:39 Jardík | skóre: 40 | blog: jarda_bloguje
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Zdravím. Velikost souboru nelze jednoduše spolehlivě zjistit použitím standardních funkcích C či C++, dokonce ani přímých systémových volání. Problémem jsou race-conditions, velikost souboru se může změnit mezi voláními fseek a ftell. V některých typech souborů zase nelze vůbec seekovat a fseek nefunguje, natož pak ftell. Taky pamatuj na to, že ftell vrací long (s tím počítáš), ale ze statu dostaneš velikost jako off_t. Když už používáš ftell, který vrací long, tak by bylo lepší ten off_t přetypovat spíš na long než na int, ale samozřejmě by bylo lepší použít třeba intmax_t, nebo zkontrolovat před přetypováním hodnotu, nebo úplně nejlépe nepřetypovávat vůbec. A protože nevím o žádném modifieru pro printf, který je použitelný pro off_t, tak třeba použít _Generic z C11 a hezky ten kód zaprasit :-)

    V tvém kódu je navíc i bezpečnostní díra, kdy můžeš provádět stat() nad jiným souborem, než který si otevřel. Měl bys použít fstat(), deskriptor zjistíš z fileno() (není standardní fce C, je to POSIX-2001).
    Věřím v jednoho Boha.
    22.7.2014 22:05 asdasdfasdf
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Problémem jsou race-conditions, velikost souboru se může změnit mezi voláními fseek a ftell

    Je to problem? Ked sa velkost suboru meni, tak tazko urcit, ktory moment na zistenie velkosti je ten spravny. Z principu tam musi byt "race-condition" - scheduler mohol naplanovat zistovanie velkosti lubovolne. Alebo sa mylim?

    V některých typech souborů zase nelze vůbec seekovat a fseek nefunguje, natož pak ftell.

    Presne preto by som tiez doporucil fstat a zistit si aj typ suboru. Ked tam nie je splnene S_ISREG, tak by som vypisal, ze to nema zmysel. Akurat by som sa mozno este zamyslel nad tym, ci nejak nepodporovat aj symlinky.

    Jardík avatar 23.7.2014 11:02 Jardík | skóre: 40 | blog: jarda_bloguje
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Je to problem? Ked sa velkost suboru meni, tak tazko urcit, ktory moment na zistenie velkosti je ten spravny. Z principu tam musi byt "race-condition" - scheduler mohol naplanovat zistovanie velkosti lubovolne. Alebo sa mylim?
    Vždyť to píšu. A ano, problém to je, když je tvým úkolem zjistit velikost souboru v daném okamžiku. fseek+ftell je špatné řešení, protože máž jakési 2 okamžiky a mezi tím race condition. fstat je ale pouze jedno volání a tedy víš, že v okamžiku volání fce fstat je velikost taková a maková. To nemůžeš říc o ftell, protože nejdřív musíš seekovat. Ale samozřejmě u obou případů je další race condition mezi voláním a použitím té hodnoty (třeba i vypsání). Ale s fstatem máš o jednu méně a to se počítá :-)
    Presne preto by som tiez doporucil fstat a zistit si aj typ suboru. Ked tam nie je splnene S_ISREG, tak by som vypisal, ze to nema zmysel ...
    Jó, souhlas.
    Věřím v jednoho Boha.
    23.7.2014 12:37 R
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Race condition medzi zistenim hodnoty a vypisanim? WTF?

    To uz je potom race condition aj medzi vypisanim hodnoty na obrazovku a momentom, ked si ju clovek vsimne...
    Jardík avatar 25.7.2014 06:01 Jardík | skóre: 40 | blog: jarda_bloguje
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    To je!
    Věřím v jednoho Boha.
    23.7.2014 14:59 asdfasdf
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C

     

    když je tvým úkolem zjistit velikost souboru v daném okamžiku ... fstat je ale pouze jedno volání a tedy víš, že v okamžiku volání fce fstat je velikost taková a maková.

     

    Co je okamzik volania funkcie?

    Ocislujme si potrebne vykonavane kroky:

    1. v programe uzivatela sa vykonaju nejake instrukcie pred zistovanim velkosti
    2. zavola sa funkcia na zistenie velkosti
    3. CPU vykonava user-space kod funkcie zistujucej velkost
    4. syscall - zacne sa vykonavat kernelovy kod funkcie zistujucej velkost
    5. cez VFS bubleme k NFS
    6. NFS zisti, kam po sieti treba nieco poslat a posle poziadavku
    7. druhy PC nieco robi
    8. NFS prijme odpoved
    9. bubleme naspat cez VFS
    10. dokoncujeme syscall
    11. dokoncujeme userspace funkciu typicky v libc, ktora mala zistit velkost suboru
    12. velkost sa vrati z uzivatelskeho volania
    13. vykonavaju sa instrukcie za zistenim velkosti

    A teraz - zistit a pripadne poznamenat si "aktualny moment volania funkcie" mas moznost iba v 1. a v 13. Za 1 alebo pred 13 moze kludne prist interrupt a moze sa pomerne dlho vykonavat iny program.

    Naco nam je teda nejaky "okamzik volania funkcie fstat", ked si realne mozeme zapisat 1 (alebo 13), co moze byt pri dost rychlej zmene velkosti dost daleko od reality?

    Jardík avatar 25.7.2014 06:07 Jardík | skóre: 40 | blog: jarda_bloguje
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Jsem to myslel tak, že když prostě zavoláte fstat, máte jakýsi správný výsledek z té doby volání fstatu (nebo tedy i jeho průběhu apod). Když ale seekujete na konec a pak uděláte ftell, nemůžete se spolehnout, že jste na konci. No ale to je jedno, důležité je, že to pořádně udělat nejde, vždycky z toho vyleze nedokonalý bastl, pokud třeba na linuxu nezamknete jako root filesystém a pak neodemknete, tůším na to je nějaké ioctl.
    Věřím v jednoho Boha.
    tomes.io avatar 23.7.2014 16:24 tomes.io | skóre: 12 | blog: tomesh
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Sem to predelal na snad korektnejsi:
    void file_size(char *path)
    {
    	off_t file_size;
    	struct stat stbuf;
    	int fd;
    
    	printf("path is:%s\n", path);
      
    	fd = open(path, O_RDONLY);
    	if (fd == -1) {
    		printf("File can not be opened\n");
            exit(1);
    	}
      
    	if ((fstat(fd, &stbuf) != 0) || (!S_ISREG(stbuf.st_mode))) {
    		printf("File can not be checked by stat\n");
            exit(1);
    	}
      
    	file_size = stbuf.st_size;
      		
    	printf("File size(stat):%jd bytes\n", (intmax_t)file_size);
    
    	free(path);
    }
    
    
    23.7.2014 22:54 Michal Kubeček | skóre: 71 | Luštěnice
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C

    Pár (ne)praktických poznámek:

    1. Od funkce file_size() bych čekal spíš to, že velikost souboru vrátí, než te ji vypíše na standardní výstup.

    2. A už vůbec bych nečekal, že v případě úspěchu na argument zavolá free() (takže nejde přímo zavolat na literál nebo jakýkoli string, který nebyl přímo alokován pomocí malloc()), natož že při chybě pro jistotu ukončí celý program.

    3. Chybové hlášky patří na stderr, ne na stdout.

    4. Místo "File can not be opened" by bylo vhodnější použít perror() nebo strerror(), abyste dal uživateli nějakou nápovědu, co je vlastně špatně.

    5. Chcete-li se ve zdrojáku vyznat, je vhodné udržovat ho konzistentní. Budete-li podle momentální nálady jednou testovat návratovou hodnotu pomocí "== -1", podruhé "!= 0" a potřetí třeba "< 0", dříve či později se vám to vymstí. Doporučuji zvolit si jeden způsob a toho se (přinejmenším v rámci programu) držet.

    Jardík avatar 25.7.2014 06:10 Jardík | skóre: 40 | blog: jarda_bloguje
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Jardík téměř souhlasí, ale musím k
    A už vůbec bych nečekal, že v případě úspěchu na argument zavolá free()
    Já bych to čekal. Argument je typu char*, nikoliv char const*, takže bych měl počítat s nějakým vedlejším efektem té fce (změna některého znaku či uvolnění).
    Věřím v jednoho Boha.
    25.7.2014 07:31 Michal Kubeček | skóre: 71 | Luštěnice
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C

    Jedna věc je, co se teoreticky může stát, druhá věc je, co je rozumné od funkce očekávat. Pokud funkce něco alokuje a neuvolní nebo uvolňuje co nealokovala sama, mělo by to být něco, co je jasné už z její podstaty (jako třeba strdup(). Tady k tomu není absolutně žádný důvod a pouze to mate. U malého testovacího prográmku to samozřejmě nevadí, jenže když si člověk zvykne takhle psát, brzy se mu to vymstí. Obvykle v okamžiku, kdy (a) program dosáhne netriviální velikost, (b) po pár měsících použije ten zdroják jako základ něčeho jiného (nebo ho jen bude chtít trochu upravit) nebo (c) bude na něčem spolupracovat s dalšími vývojáři. Proto je IMHO vhodné učit se dodržovat určitou kulturu hned od začátku.

    Mimochodem, teprve teď jsem si všiml většího problému, který mi předtím unikl:

    6. Ta funkce leakuje file descriptor. Sice úplně zbytečně (není žádný důvod, proč by mne nemohla zajímat velikost souboru, který nemám právo číst) zavolá open(), ale nikdy ten soubor nezavře ani ten descriptor nikam nepředá.

    23.7.2014 22:57 Michal Kubeček | skóre: 71 | Luštěnice
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    V tvém kódu je navíc i bezpečnostní díra, kdy můžeš provádět stat() nad jiným souborem, než který si otevřel. Měl bys použít fstat(), deskriptor zjistíš z fileno() (není standardní fce C, je to POSIX-2001).

    Bezpečnostní? To je trochu silný výraz. Délka souboru přečtená z inodu je stejně jen informativní a pokud z ní bude tazatel cokoli vyvozovat (třeba že ten soubor půjde načíst do bufferu příslušné délky), tak má problém i při tom avšem postupu.

    22.7.2014 22:18 rastos | skóre: 60 | blog: rastos
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C
    Ďalšia drobnosť je:

    printf("File size(stat):%d bytes\n", (int)st.st_size);

    Neviem ako u teba, ale u mňa (64-bitový systém) je sizeof(st.st_size)=8 bajtov a sizeof(int)=4. To pretypovanie môže stratiť nejaké bity. Tiež by som sa pozrel, či ten program kde to nefunguje, náhodou pri kompilácii nemá definované -D FILE_OFFSET_BITS=64
    Fuky avatar 23.7.2014 17:51 Fuky | skóre: 52 | blog: 4u
    Rozbalit Rozbalit vše Re: Zjisteni velikosti souboru v C

    Bez kódu nefunkčního programu se to těžko hádá.

    Tiskni na výstup absolutní cestu k souboru a číslo inodu, ať máme jistotu, že se opravdu jedná o stejný soubor.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.