abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 18:33 | Nová verze

    Realtimová strategie Warzone 2100 (Wikipedie) byla vydána ve verzi 4.6.0. Podrobný přehled novinek, změn a oprav v ChangeLogu na GitHubu. Nejnovější verzi Warzone 2100 lze již instalovat také ze Snapcraftu a Flathubu.

    Ladislav Hagara | Komentářů: 0
    dnes 12:22 | IT novinky

    Polské vývojářské studio CD Projekt Red publikovalo na Printables.com 3D modely z počítačové hry Cyberpunk 2077.

    Ladislav Hagara | Komentářů: 0
    dnes 11:44 | Pozvánky

    Organizátoři konference LinuxDays 2025 vydali program a zároveň otevřeli registrace. Akce se uskuteční 4. a 5. října na FIT ČVUT v pražských Dejvicích, kde vás čekají přednášky, workshopy, stánky a spousta šikovných lidí. Vstup na akci je zdarma.

    Petr Krčmář | Komentářů: 4
    včera 22:00 | IT novinky

    Uživatelé komunikátoru Signal si mohou svá data přímo v Signalu bezpečně zálohovat a v případě rozbití nebo ztráty telefonu následně na novém telefonu obnovit. Zálohování posledních 45 dnů je zdarma. Nad 45 dnů je zpoplatněno částkou 1,99 dolaru měsíčně.

    Ladislav Hagara | Komentářů: 0
    včera 18:44 | Zajímavý článek

    Server Groklaw, zaměřený na kauzy jako právní spory SCO týkající se Linuxu, skončil před 12 lety, resp. doména stále existuje, ale web obsahuje spam propagující hazardní hry. LWN.net proto v úvodníku připomíná důležitost zachovávání komunitních zdrojů a upozorňuje, že Internet Archive je také jen jeden.

    🇵🇸 | Komentářů: 5
    včera 14:22 | Nová verze

    Jakub Vrána vydal Adminer ve verzi 5.4.0: "Delší dobu se v Admineru neobjevila žádná závažná chyba, tak jsem nemusel vydávat novou verzi, až počet změn hodně nabobtnal."

    Ladislav Hagara | Komentářů: 1
    včera 13:22 | IT novinky

    V Německu slavnostně uvedli do provozu (en) nejrychlejší počítač v Evropě. Superpočítač Jupiter se nachází ve výzkumném ústavu v Jülichu na západě země, podle německého kancléře Friedricha Merze otevírá nové možnosti pro trénování modelů umělé inteligence (AI) i pro vědecké simulace. Superpočítač Jupiter je nejrychlejší v Evropě a čtvrtý nejrychlejší na světě (TOP500). „Chceme, aby se z Německa stal národ umělé inteligence,“ uvedl na

    … více »
    Ladislav Hagara | Komentářů: 16
    7.9. 04:11 | Komunita

    V Berlíně probíhá konference vývojářů a uživatelů desktopového prostředí KDE Plasma Akademy 2025. Při té příležitosti byla oznámena alfa verze nové linuxové distribuce KDE Linux.

    Ladislav Hagara | Komentářů: 1
    6.9. 17:11 | Nová verze

    Byl vydán Debian 13.1, tj. první opravná verze Debianu 13 s kódovým názvem Trixie a Debian 12.12, tj. dvanáctá opravná verze Debianu 12 s kódovým názvem Bookworm. Řešeny jsou především bezpečnostní problémy, ale také několik vážných chyb. Instalační média Debianu 13 a Debianu 12 lze samozřejmě nadále k instalaci používat. Po instalaci stačí systém aktualizovat.

    Ladislav Hagara | Komentářů: 2
    5.9. 23:44 | IT novinky

    Evropská komise potrestala Google ze skupiny Alphabet pokutou 2,95 miliardy eur (71,9 miliardy Kč) za porušení antimonopolní legislativy. Podle EK, která mimo jiné plní funkci antimonopolního orgánu EU, se Google dopustil protisoutěžních praktik ve svém reklamním byznysu. Google v reakci uvedl, že rozhodnutí považuje za chybné a hodlá se proti němu odvolat. EK ve věci rozhodovala na základě stížnosti Evropské rady vydavatelů. Podle

    … více »
    Ladislav Hagara | Komentářů: 47
    Pro otevření více webových stránek ve webovém prohlížečí používám
     (83%)
     (7%)
     (2%)
     (3%)
     (3%)
     (2%)
    Celkem 157 hlasů
     Komentářů: 11, poslední 4.9. 16:12
    Rozcestník

    Dotaz: fread binárního souboru 16bit dat do 32bitového pole

    7.8.2021 01:01 Jirka | skóre: 25
    fread binárního souboru 16bit dat do 32bitového pole
    Přečteno: 413×
    Zdravím všechny,
    dá se nějak přímo načíst binární soubor, který obsahuje např. 1000000 16bitových hodnot do unsigned int pole[1000000] ?
    Načítá mi to po dvou hodnotách do jedné buňky jako 32bitové číslo, což je špatně. Mezikrok v podobě 16bit pole samozřejmě funguje, ale raději bych tolik neplýtval pamětí. Díky. :-)
    Dokud to funguje, nešťourej se v tom!...

    Řešení dotazu:


    Odpovědi

    Řešení 1× (Jirka (tazatel))
    Jendа avatar 7.8.2021 01:27 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Nedá. Použil bych dočasné pole, stačí třeba 128 bajtů (overhead fread je malý, a pokud použiješ fread_unlocked, tak ještě menší) a do něj to vždycky načetl a přesypal. Nebo řešíš interní buffery, co si fread udržuje?
    7.8.2021 09:07 Jirka | skóre: 25
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Tady se jedná o globální pole o velikosti 12mega, ve kterým rovnou probíhají i výpočty. Ale jedno 16bitové globální pole potřebné velikosti už v programu mám, využité jen pro zápis, jinak zahálí, tak se využije i pro čtení. Oboje se dělat najednou asi nebude. :-D
    Díky. :-)
    Dokud to funguje, nešťourej se v tom!...
    Jendа avatar 7.8.2021 12:17 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    No a? To se dělá tak jak píšu: funkce, která to pole plní, si udělá třeba na stacku, pole o pár prvcích, a pak vždycky načte pár prvků do tohoto pole a nasype to do toho globálního, načte dalších pár prvků a nasype do toho globálního atd.

    Pokud bys používal přímo read, tak by toto dočasné pole muselo mít tak megabajt. Pokud ale používáš fread, tak u tohoto dočasného pole stačí řádově těch 128 bajtů.
    7.8.2021 05:37 Radovan
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Byla by jedna dvaatřicetibitová proměnná, kterou si rozřízneš na dvě půlky, plýtvání pamětí?
    7.8.2021 08:54 Jirka | skóre: 25
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Mám dojem, že např. 32bitový systém, když v něm vytvořím 16bit proměnnou, těch zbylých 16 bitů neumí využít. Kdyžtak mě někdo opravte.
    Dokud to funguje, nešťourej se v tom!...
    11.8.2021 08:00 10minuteman
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Ja to kdysi řešil tak, že jsem měl union { uint32_t, uint16_t[2] }, skrze ten jsem to konvertoval. Možná je to ale oficiálně UB.
    7.8.2021 08:59 z_sk | skóre: 34 | blog: analyzy
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Standardne je int vacsi ako 2B, tak to musis spracovat nejak tak.
    #include <stdio.h>
    #include <stdint.h>
    #include <string.h>
    
    // Licence: CC0
    
    #define COUNT 10
    
    int main()
    {
    	int a;
    	uint16_t data[COUNT]={0};
    	FILE *file;
    	uint16_t tmp;
    	
    	// nastavi hodnoty
    	for(a=0;a<COUNT; a++)
    		data[a]=a;
    	
    	// ulozi hodnoty
    	file=fopen("data.bin", "wb");
    	if(file == NULL)
    		return(1);
    	if(fwrite(data, COUNT*sizeof(uint16_t), 1, file) != 1)
    		return(2);
    	fclose(file);
    	
    	// mazem data
    	bzero(data, COUNT);
    	
    	// nacitavam data zo suboru
    	file=fopen("data.bin", "rb");
    	if(file == NULL)
    		return 3;
    	for(a=0;a<COUNT; a++) // nacitava subor po sekvencne, da sa aj blokovo
    	{
    		if(fread(&tmp, sizeof(uint16_t), 1, file) != 1)
    			return 4;
    		data[a]=tmp;
    	}
    	fclose(file);
    	
    	// kontrolujem, ci nacitalo to, co som zapisal
    	for(a=0;a<COUNT; a++)
    		if(data[a] != a)
    		{
    			fprintf(stderr, "data[a] != a: %u != %d\n", data[a], a);
    			return 5;
    		}
    	return 0;
    }
    
    debian.plus@protonmail.com
    7.8.2021 13:31 z_sk | skóre: 34 | blog: analyzy
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Spravne je riadok 29:
    bzero(data, COUNT*sizeof(uint16_t));
    debian.plus@protonmail.com
    Řešení 1× (Andrej)
    10.8.2021 22:46 R
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Fuj, co je to za sracku?
    7.8.2021 13:54 rastos | skóre: 63 | blog: rastos
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Keďže pravdepodobne sizeof(int)>=sizeof(int16_t), tak
    int pole[1000000];
    fread(pole,sizeof(int16_t),1000000,f);
    int16_t *p=(int16_t *)&(pole[0]);
    ... a "p" môžeš použiť ako pole: p[i]
    Jendа avatar 7.8.2021 14:19 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Jasně, ale on tam pak předpokládám potřebuje dělat nějaké int32 operace inplace.

    Ale teď mě napadla zběsilost, jak to udělat bez paměťového overheadu jedním načtením: načte to do druhé poloviny pole jako int16 a pak to začne inplace konvertovat (tj. bude číst od poloviny pole int16 a zapisovat je jako int32 od začátku). Teoreticky to vypadá dobře, prakticky narazí na problém, že tam bude aliasing pointerů a překladač to kvůli tomu nejspíš nezvládne autovektorizovat (je na to instrukce v SSE4.1 a AVX2: pmovsxwd: Sign extend packed 16-bit integers in a to packed 32-bit integers, and store the results in dst.) a ukáže se, že udělat si bokem malý scratchpad bude výhodnější.
    10.8.2021 22:50 R
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Bola to prva vec, co mi napadla. Urobi by som to tak bez rozmyslania. Je to jeden for cykus.

    Rozmyslat o nejakej vektorizacii je nezmysel. Aj moj stary Celeron, ktory ma akurat tak prvu generaciu SSE, to predsa zvladne okamzite. V porovnani s nacitanim z disku je to zanedbatelny cas.
    11.8.2021 00:37 Andrej | skóre: 51 | blog: Republic of Mordor
    Rozbalit Rozbalit vše Re: fread binárního souboru 16bit dat do 32bitového pole
    Mezikrok v podobě 16bit pole samozřejmě funguje, ale raději bych tolik neplýtval pamětí.

    Huh? Vždyť není třeba nikde plýtvat pamětí:

    void stretch16b32b(void* array, size_t size) {
      const uint16_t *input = (uint16_t*)array + size - 1;
      uint32_t *output = (uint32_t*)array + size - 1;
      while (output >= (uint32_t*)array) { *output-- = *input--; }
    }
    

    Tady je totéž v nějakém kontextu:

    #include <errno.h>
    #include <stddef.h>
    #include <stdint.h>
    #include <stdio.h>
    #include <stdlib.h>
    
    static void stretch16b32b(void* array, size_t size) {
      const uint16_t *input = (uint16_t*)array + size - 1;
      uint32_t *output = (uint32_t*)array + size - 1;
      while (output >= (uint32_t*)array) { *output-- = *input--; }
    }
    
    static int try_close(FILE *f) {
      int errors = 0;
      if (ferror(f)) { fputs("Read error\n", stderr); ++errors; }
      if (fclose(f)) { perror("Close error"); ++errors; }
      return errors;
    }
    
    static int fread16b(const char* file, void *array, size_t size) {
      FILE *const f = fopen(file, "r");
      if (!f) { perror("Open error"); return 0x1; }
      size_t items = fread(array, sizeof(uint16_t), size, f);
      if (items != size) {
        fputs("Too few elements or read error\n", stderr);
        return 0x2 + try_close(f);
      }
      if (fread(array, 1, 1, f)) { fputs("Input too long\n", stderr);
                                   return 0x4 + try_close(f); }
      if (!feof(f)) { fputs("This must not happen\n", stderr);
                      return 0x6 + try_close(f); }
      const int retval = try_close(f);
      if (retval) { return 0x8 + retval; }
      return 0;
    }
    
    static size_t readuint(const char *input, int *error) {
      char *end;
      errno = 0;
      const size_t result = strtoul(input, &end, 10);
      if (errno) { perror("Invalid number\n"); ++*error; return 0; }
      if (*end || input == end) { fputs("Invalid number\n", stderr);
                                  ++*error; return 0; }
      return result;
    }
    
    int main(int argc, const char *const *argv) {
      if (argc != 3) {
        fprintf(stderr, "Usage: %s <number of shorts> "
                        "<input file>\n", argc ? argv[0] : "program");
        return 0x1;
      }
    
      int error = 0;
      const size_t size = readuint(argv[1], &error);
      if (error) { return 0x1 + error; }
    
      uint32_t *const array = malloc(size * sizeof(uint32_t));
      if (!array) { fputs("Out of memory\n", stderr); return 0x4; }
      const uint32_t *const end = array + size;
    
      const int retval = fread16b(argv[2], array, size);
      if (retval) { free(array); return 0x10 + retval; }
    
      stretch16b32b(array, size);
      for (const uint32_t *i = array; i < end; ++i) {
        if (printf("%u\n", *i) < 0) { free(array); return 0x5; }
      }
    
      free(array);
      return 0;
    }
    

    Přeložíme to…

    clang -std=c11 -march=native -O3 -Wall -Wextra -pedantic compactread.c -o compactread
    

    …a trochu to otestujeme:

    Příklad 1 (little endian):

    $ echo -en '\x1\x0\x2\x0\x3\x0\x4\x0\x5\x0\x6\x0\x7\x0' | ./compactread 7 /dev/stdin
    1
    2
    3
    4
    5
    6
    7
    

    Příklad 2 (little endian):

    $ echo -en '\x1\x1\x1\x1' | ./compactread 2 /dev/stdin
    257
    257
    

    Příklad 3 (little endian):

    $ echo -en '\xff\xff' | ./compactread 1 /dev/stdin
    65535
    

    Příklad 4 (naprosto k hovnu, ale valgrindem taky projít musí):

    $ echo -en '' | ./compactread 0 /dev/stdin
    

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.