abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 21:32 | Nasazení Linuxu

Canonical představuje nejnovější verzi chytré helmy DAQRI s Ubuntu pro rozšířenou realitu. K vidění bude příští týden v Barceloně na veletrhu Mobile World Congress 2017.

Ladislav Hagara | Komentářů: 0
včera 21:31 | Pozvánky

Pro zájemce o hlubší znalosti fungování operačních systémů připravila MFF UK nový předmět Pokročilé operační systémy, v rámci něhož se vystřídají přednášející nejen z řad pracovníků fakulty, ale dorazí také odborníci ze společností AVAST, Oracle, Red Hat a SUSE. Tento předmět volně navazuje na kurz Operační systémy ze zimního semestru, ale pokud máte praktické zkušenosti odjinud (například z přispívání do jádra Linuxu) a chcete si

… více »
Martin Děcký | Komentářů: 0
včera 21:30 | Pozvánky

Czech JBoss User Group Vás srdečně zve na setkání JBUG v Brně, které se koná ve středu 1. března 2017 v prostorách Fakulty Informatiky Masarykovy Univerzity v místnosti A318 od 18:00. Přednáší Tomáš Remeš a Matěj Novotný na téma CDI 2.0 - New and Noteworthy. Více informací na Facebooku a na Twitteru #jbugcz.

mjedlick | Komentářů: 0
20.2. 23:45 | Zajímavý software

Na blogu Qt bylo představeno Qt 3D Studio. Jedná se o produkt dosud známý pod názvem NVIDIA DRIVE™ Design Studio. NVIDIA jej věnovala Qt. Jedná se o několik set tisíc řádků zdrojového kódu. Qt 3D Studio bude stejně jako Qt k dispozici jak pod open source, tak pod komerční licencí. Ukázka práce s Qt 3D Studiem na YouTube.

Ladislav Hagara | Komentářů: 10
20.2. 17:50 | Komunita

Nadace The Document Foundation (TDF) zastřešující vývoj svobodného kancelářského balíku LibreOffice slaví 5 let od svého oficiálního vzniku. Nadace byla představena 28. září 2010. Formálně byla založena ale až 17. února 2012.

Ladislav Hagara | Komentářů: 0
20.2. 12:50 | Komunita

Mozilla.cz informuje, že dosud experimentální funkce Page Shot z programu Firefox Test Pilot (zprávička) se stane součástí Firefoxu. Page Shot je nástroj pro vytváření snímků webových stránek. Umí výběr oblasti, prvku stránky (např. odstavce), nebo uložení snímku celé stránky. Snímky lze ukládat na disk nebo nahrávat na server Mozilly. Nedávno bylo oznámeno, že se součástí Firefoxu stane Activity Stream.

Ladislav Hagara | Komentářů: 32
20.2. 04:10 | Nová verze

Po 10 týdnech vývoje od vydání Linuxu 4.9 (zprávička) oznámil Linus Torvalds, mj. již 20 let žijící v USA, vydání Linuxu 4.10 (LKML). Přehled nových vlastností a vylepšení například na Kernel Newbies a v Jaderných novinách (1, 2 a 3). Kódové jméno Linuxu 4.10 je Fearless Coyote.

Ladislav Hagara | Komentářů: 22
19.2. 15:55 | Zajímavý projekt

Vyzkoušet si příkazy a vyřešit několik úkolů lze na stránkách Commandline Challenge (CMD Challenge). Úkoly lze řešit různými způsoby, důležitý je výsledek. Zdrojové kódy jsou k dispozici na GitHubu pod licencí MIT.

Ladislav Hagara | Komentářů: 18
18.2. 17:35 | Bezpečnostní upozornění

Německá Bundesnetzagentur (obdoba českého ČTU) zakázala na německém území prodej panenky Cayla kvůli „špionáži“ dětí. Tato elektronická hračka obsahuje mikrofon, reproduktor a kameru a bezdrátové komunikační rozhraní, pomocí kterého se hračka připojuje na servery výrobce. Takovýmto způsobem může hračka pomocí umělé inteligence „odpovídat“ na dotazy dítěte. Hlavní problém bude ale asi někde jinde, podle prvotních zpráv může

… více »
Petr Tomášek | Komentářů: 34
17.2. 15:30 | Bezpečnostní upozornění

CSIRT.CZ upozorňuje, že bezpečnostní experti objevili nový typ malwaru, jenž cílí na open source e-commerce platformu Magento. Malware je zajímavý tím, že se jedná o první svého druhu, jehož kód zůstává skrytý v SQL databázi zasaženého e-shopu. Škodlivý kód je volán pomocí tzv. SQL trigerru, který je spouštěn při každém vytvoření objednávky v systému.

Ladislav Hagara | Komentářů: 6
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (13%)
 (2%)
 (72%)
 (3%)
 (10%)
Celkem 679 hlasů
 Komentářů: 61, poslední včera 13:06
Rozcestník

Dotaz: Soubory MySQL vs. Filesystem

18.3.2009 19:55 Smudla2
Soubory MySQL vs. Filesystem
Přečteno: 1430×

Zdravím, mám takový začátečnický dotaz. Máme navrženou databázi (vytvořené tabulky naplněné daty) v MySQL. Nyní bychom rádi do jedné tabulky databáze vkládali (příslušné položce tabulky) i soubory (přes atributy FILE_ID či URI). Tyto soubory bysme chtěli uchovávat mimo databázi někde na filesystemu. Problém je v tom, že nevíme, jak toto realizovat. Co vše musíme udělat pro to, aby šli soubory vkládat a získavát? Chceme mít rozhraní v Javě na PC (např. notebook), které do příslušné položky tabulky v databázi udělá záznam o souboru (např. URI) a zároveň tento soubor uloží na filesystem (např. na jiný server než běží samotná databáze). Z tohoto rozhraní by mělo jít zároveň tento soubor získat. Databáze MySQL beží na linuxovén serveru.

Díky za každou radu či příklad.

Martin

Odpovědi

18.3.2009 20:41 cronin | skóre: 48
Rozbalit Rozbalit vše Re: Soubory MySQL vs. Filesystem
To, čo opisuješ, sa v praxi bežne používa. Riziká sú v zásade dve. Poprvé musí byť konzistencia väzieb medzi údajmi v databáze a na disku udržiavaná aplikačne, t.j. mimo samotnej databázy. Takáto konzistencia je krehká a je viac-menej len otázkou času, kedy bude narušená. Viac informácií Ti poskytne akákoľvek seriózna kniha o návrhu aplikácií pre relačné databázy. Podruhé je zložitejšie robiť zálohovanie, a tu sú opäť riziká dve: Poprvé treba zálohovať dve údajové úložištia, databázu a súborový systém, čo je minimálne nepohodlné. Podruhé je problém urobiť konzistentnú zálohu, t.j. transakčne konzistentný snapshot týchto dvoch nezávislých úložíšť; zvyčajne je to možné iba v offline režime. A vlastne celkovo je problém zabezpečit transakčnosť operácií nad databázou a zároveň nad súborovým systémom; distribuované transakcie sú doménou databáz značne iného rangu ako je MySQL, a transakčnosť nad súborovým systémom je jemne povedané problematická; pritom práve databáza je práve oný prvok, ktorý rieši mimoiné aj transakčnosť uloženia údajov na súborový systém.

Takže ešte raz: to, čo opisuješ, sa v praxi bežne používa. Jedna z prvých požiadaviek na zmenu takto navrhnutého softvéru zvyčajne je umožniť ukladať kompletný obsah do databázy.
20.3.2009 09:09 Filip Hesse | skóre: 20
Rozbalit Rozbalit vše Re: Soubory MySQL vs. Filesystem

Ano, tak nějak. Těch nevýhod je si myslím víc, než při ukládání souborů přímo do BLOBu v databázi.

Hodně se mluví o zpomalení databáze při použití BLOBů. Nevím, jak to má MySQL, ale tato hlavní nevýhoda se dá eliminovat použitím jedné tabulky pro informace o souboru (z této tabulky se bude vyhledávat, bude možné ji JOINovat jinam) a druhé tabulky se samotným BLOBem, s vazbou 1:1 na první tabulku, do které se sáhne teprve při potřebě se souborem pracovat.

Trochu by pomohlo vědět, o jaké soubory se jedná. Můj přístup se bude hodit při databázi zaměstnanců na uložení JPEG. Určitě se nebude hodit na databázi filmů, kde se bude ukládat DVD.ISO.

Josef Kufner avatar 28.3.2009 15:41 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: Soubory MySQL vs. Filesystem
Pak je ještě možnost do DB soubory uložit a cachovat je na disku, kde bude moct httpd k datům přistupovat i bez pomoci aplikační logiky (např. php). Ale i to má své drobné mouchy...
Hello world ! Segmentation fault (core dumped)
28.3.2009 17:17 Michal2
Rozbalit Rozbalit vše Re: Soubory MySQL vs. Filesystem
Nekde delali mereni jak rychle trva vytazeni souboru ruznych velikosti z databaze (MySQL, MyISAM tabulka) vs precteni z disku (ciste select blob from tabulka where id= oproti fopen a fread, tabulka mela stejna zaznamu jako adresar souboru, merila se latence za jak dlouho bude mit v obou pripadech aplikace data nactena a zatizeni procesoru). Kdyz probehlo cteni v obou pripadech z diskove cache tak byla latence ziskani dat MySQL oproti filesystemu 50x vetsi kdyz byl mysql server na stejnem stroji jako aplikacni server, pokud to bylo na serveru jinema mysql slo pres tcp a soubory pres nfs tak to bylo z hlediska filesystemu jeste lepsi. Kdyz se data cetla z disku tak byly rozdil 1:3 ve prospech filesystemu.

Jinak take zjistili, ze velke bloby v databazi uspesne flushuji buffery coz ostatnim operacim nad databazi moc neprospiva.

Takze ano, pouzit se to da ale pozor na vykon.

6.4.2009 14:44 Ivan
Rozbalit Rozbalit vše OT: Re: Soubory MySQL vs. Filesystem

Hmm, ja delal mereni Oracle vs. JFS na AIXu a od 10^4 souboru v jednom adresari vedl Oracle. NFS poskytovalo nekonzistentni udaje, a kdyz jsem namontoval filesystemy s parametrem noac, tak bylo NFS nepouzitelny.

6.4.2009 15:15 Michal2
Rozbalit Rozbalit vše Re: OT: Re: Soubory MySQL vs. Filesystem

Njn, od nekolika stovek zaznamu se oplati udelat hierarchie treba 12/34/56.jpg. Takto narves milion souboru do struktury pricemz tam jevzdy max 100 souboru/adresaru v adresari a dvoji traverzace nestoji skoro nic.

 

4.4.2009 08:40 Messa | skóre: 39 | blog: Messa
Rozbalit Rozbalit vše Re: Soubory MySQL vs. Filesystem
Ja osobne preferuji ukladat data do souboru a do databaze ukladat jen odkazy na ne (napr. nazev souboru). Myslim si, ze se to treba lepe zalohuje, kdyz je dump databaze radove mensi, na rozdilovou zalohu filesystemu existuji lepsi nastroje. Konzistentni zaloha nemusi byt problem, zalezi na tom, jak ta aplikace pracuje.

Pokud je problem v tom, ze aplikace neni zcela pod kontrolou a nemusi nekdy dodrzet konzistenci mezi db a filesystemem, resenim je pouzit (vytvorit) aplikacni server, ktery to nahravani souboru bude obstaravat, a uzivatelske aplikaci pristup do databaze treba i zakazat :)

V praxi se vyskytuji i pripady, kdy je jednim z prvnich pozadavku ukladat velka data do souboru misto do databaze :)

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.