abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    včera 21:11 | IT novinky

    Google, potažmo YouTube umožní návrat tvůrcům, kteří byli zablokováni kvůli údajnému šíření dezinformací souvisejících s COVID-19 a volbami. Tvůrci teď mohou požádat o navrácení přístupu. Společnost Alphabet v této souvislosti uvedla, že zákazy byly uděleny kvůli tlaku tehdejší Bidenovy administrativy.

    karkar | Komentářů: 8
    včera 18:33 | Zajímavý článek

    Vývojári z distribúcie Artix, ktorá je postavená na Arch Linuxe, alebo skôr jeho forkom, už skôr prešli na Open-RC init systém, stále však niektoré projekty ako GNOME boli závislé na systemd. Teraz pretiekol pohár trpezlivosti a počnúc GNOME 49, kvôli ktorému komponenta gnome-session je úplne závislá na systemd-init, padlo rozhodnutie na odstránenie GNOME z repozitárov Artixu. Táto zmena sa podľa všetkého týka viac než 90 distribúcií, ktoré tiež nepoužívajú systemd. Viac v príspevku na DistroWatch.

    lukve | Komentářů: 6
    včera 17:33 | IT novinky

    Magazín IEEE Spectrum opět po roce publikoval svůj žebříček programovacích jazyků. Vedou Python, Java, C++, SQL a C#.

    Ladislav Hagara | Komentářů: 2
    včera 15:11 | Komunita

    Repozitáře pro spolupráci v rámci projektu Fedora se přesunou z Pagure na nově vzniklý Fedora Forge. Ten stejně jako třeba Codeberg běží na softwaru Forgejo, které bylo už před časem vybráno jako náhrada za Pagure. Pagure pochází z dílny Fedory, ale mimo ni se příliš neuchytil. Jeho vývoj a údržba byly náročné a Fedora se rozhodla jít cestou úspěšnějšího projektu, který má větší základnu přispěvatelů.

    Ladislav Hagara | Komentářů: 0
    včera 12:22 | Nová verze

    Byla vydána (𝕏) nová verze 2025.3 linuxové distribuce navržené pro digitální forenzní analýzu a penetrační testování Kali Linux (Wikipedie). Přehled novinek se seznamem nových nástrojů v oficiálním oznámení na blogu.

    Ladislav Hagara | Komentářů: 0
    23.9. 12:33 | IT novinky

    V IT4Innovations národním superpočítačovém centru byl dnes slavnostně spuštěn první český kvantový počítač VLQ disponující 24 fyzickými qubity s unikátní hvězdicovou topologií. Systém dodala společnost IQM Quantum Computers a jeho celková pořizovací cena činila přibližně 125 milionů korun.

    Ladislav Hagara | Komentářů: 31
    23.9. 12:22 | IT novinky

    Výrobce čipů Nvidia chce investovat až 100 miliard dolarů (přes dva biliony Kč) do společnosti zaměřené na umělou inteligenci OpenAI. Firmy o tom informují v tiskové zprávě. Oznámené partnerství přichází v době, kdy se mezi technologickými giganty a start-upy zostřuje konkurence o zajištění přístupu k energii a čipům potřebným pro rozvoj umělé inteligence (AI).

    Ladislav Hagara | Komentářů: 0
    23.9. 05:22 | Zajímavý článek

    Nové číslo časopisu Raspberry Pi zdarma ke čtení: Raspberry Pi Official Magazine 157 (pdf).

    Ladislav Hagara | Komentářů: 0
    23.9. 00:11 | Komunita

    Společnost Cloudflare oznámila, že sponzoruje nezávislý webový prohlížeč Ladybird a linuxovou distribuci pro vývojáře Omarchy (Arch Linux s dlaždicovým správcem oken Hyprland).

    Ladislav Hagara | Komentářů: 0
    22.9. 17:11 | Zajímavý software

    Společnost XTX Markets zabývající se algoritmickým obchodováním pro své potřeby vyvinula a dnes představila a otevřela souborový systém TernFS. Zdrojové kódy jsou k dispozici na GitHubu. Vývoj TernFS začal počátkem roku 2022. Od léta 2023 jej XTX Markets používá v produkčním prostředí.

    Ladislav Hagara | Komentářů: 8
    Jaké řešení používáte k vývoji / práci?
     (42%)
     (52%)
     (9%)
     (10%)
     (13%)
     (10%)
     (18%)
     (10%)
     (15%)
    Celkem 88 hlasů
     Komentářů: 9, poslední včera 17:28
    Rozcestník

    MySQL, Python, Archív?

    1.7.2008 16:18 | Přečteno: 1051× | Nezařazené | poslední úprava: 1.7.2008 16:49

    Pracuju teď na jednom malým prográmku(skriptíku), který bude prostě zpracovávat určitá data a naplňovat těmi daty databázi. Jak název napovídý zvolil jsem python. Moc v něm zkušený nejsem, ale pár drobností jsme si v pythonu zkoušel. Udělat si parser na data nebyl problém. Z vybraných dat si vytvářím soubor, který obsahuje informace, které budou importem přeneseny do databáze, toto vše funguje OK.

    Ale narazil jsem i na potíž. Script bude fungovat tak, že v určitým intervalu se připojí na databázi odkud stáhne data, která jsou v binární formě v tar.gz archivu, data rozbalí a pak je teprve začne číst a parsovat. Můj problém spočívá v tom že nevím jak si toto prostředí nasimulovat. Tím myslím že bych potřeboval poradit jak do mysql databáze dostat ten archív, abych pak mohl zkusit ty data vydolovat a rozbalit.

    Tak bych se chtěl zeptat, zda se nenajde někdo kdo má větší skills a dokázal by mi poradit, jak nacpat archív do databáze.

    UPDATE: Tak už mi to funguje

           

    Hodnocení: 100 %

            špatnédobré        

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    Komentáře

    Vložit další komentář

    alblaho avatar 1.7.2008 16:27 alblaho | skóre: 17 | blog: alblog
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Tak úplně mi není jasné, na co se ptáš.

    Taková data musí být v MySQL uložená jako BLOB. Myslím, že MySQL neumí ten BLOB číst nějakým kurzorem, takže se ti to v tom Pythonu bude jevit jako gigantický řetězec.
    kozzi avatar 1.7.2008 16:48 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    No data to předává v tuple z něj jsem si vzal tu část co potřebuji a dal ji zapsat v binární podobě a hle archív je funkční. Díky za nakopnutí ohledně toho blob.
    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    mess avatar 1.7.2008 16:29 mess | skóre: 43 | blog: bordel | Háj ve Slezsku - Smolkov
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    A nebylo by lepší ty archivy zapsat někam do souborového systému a do MySQL uložit jen cestu k nim?
    Cez párne mesiace zošíváš vaginy, cez neparne montuješ hajzle.
    kozzi avatar 1.7.2008 16:47 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    No to kde budou data na me nezavisi, ale zkusim to protlacit, vzhledem ktomu jak moc velky by ten soubor mohl bejt.
    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    Heron avatar 1.7.2008 17:07 Heron | skóre: 53 | blog: root_at_heron | Olomouc
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Já na to asi napíšu nějaký benchmark. Co jsem četl pro MSSQL, tak do určité velikosti (zkusím to najít) bylo lepší (rychlejší) ukládat do DB jako BLOB, než na FS (NTFS).

    Celkem by mě zajímalo jak je to pro kombinaci MySQL (MYISAM, i když innodb tak taky zarhnu) a ext3.
    Heron avatar 1.7.2008 17:31 Heron | skóre: 53 | blog: root_at_heron | Olomouc
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Tak jsem to našel to BLOB or not to BLOB. Podle tohoto PDF je pro různé stavy a počty přepisů daných DB rychlejší než FS pro BLOBy o velikost 1MB (resp. 300kB po několikátém přepsání záznamu). Teď ještě zjistit jak je to pro ext3.
    1.7.2008 18:38 Miloslav Ponkrác | blog: miloslavponkrac
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Jenže do databáze se dá přistoupit odkudkoli, zatímco třeba vzdáleně musíte mít na filesystém práva. A dále já do MySQL ukládal mnoho terabajtů dat namísto do souborů do databáze a musím říct, že výkon byl velice dobrý, tipnul bych si odvážně říct, že databáze mnohokrát vracela data rychleji, než filesystém.
    kozzi avatar 1.7.2008 19:50 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    A nesetkal si se někdy s touto hláškou?
    Got a packet bigger than 'max_allowed_packet' bytes
    
    Samozrejme max_allowed_packet je nastaven na dostatecne velkou hodnotu. Zkousel jsme i to udelat takto:
    mysql databaze -uUser -pHeslo -hIP --max_allowed_packet=100M < data
    
    Bohuzel nic nezabira.
    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    mess avatar 1.7.2008 20:31 mess | skóre: 43 | blog: bordel | Háj ve Slezsku - Smolkov
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Kdyby se použil FTP server, tak by stačilo mít login do DB a login na FTP a nějaká práva nás nemusí zajímat (teda samozřejmě musí mít ten FTP server přístup k těm souborům).
    Cez párne mesiace zošíváš vaginy, cez neparne montuješ hajzle.
    alblaho avatar 1.7.2008 21:25 alblaho | skóre: 17 | blog: alblog
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    No fuj, FTP, nejohavnější protokol ze všech :-)

    Ono na tom "data patří do databáze" něco bude :-)
    1.7.2008 23:46 Ladicek | skóre: 28 | blog: variace | Havlíčkův brod
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Ono na tom "data patří do databáze" něco bude :-)
    To bych souhlasil. Ale jenom proto, že jsi nepoužil slovo relační :-)

    Souborový systém je databáze svého druhu, troufám si tvrdit. A čekal bych, že pro podobné způsoby využití bude líp optimalizovaná než běžná relační databáze. MyISAM zase určitě není běžná relační databáze :-)
    Ještě na tom nejsem tak špatně, abych četl Viewegha.
    kozzi avatar 1.7.2008 21:32 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: MySQl, Python, Archív?
    Jo jenze to by musel bezet ftp navic. Ale velkou vyhodou toho ze jsou data v databazi je i to ze krom samotnyho souboru jso tam polozky jako treba ZPRACOVANO coz oznacuje stav, zda uz byl dany soubor mym skriptem zpracovan, coz je velka vyhoda.
    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"

    Založit nové vláknoNahoru

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.