abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 23:14 | Nová verze

Po třech týdnech od vydání první RC verze byla vydána první stabilní verze 17.01.0 linuxové distribuce pro routery a vestavěné systémy LEDE (Linux Embedded Development Environment), forku linuxové distribuce OpenWrt. Přehled novinek v poznámkách k vydání. Dotazy v diskusním fóru.

Ladislav Hagara | Komentářů: 0
dnes 17:28 | Bezpečnostní upozornění

Byly zveřejněny informace o bezpečnostní chybě CVE-2017-6074 v Linuxu zneužitelné k lokální eskalaci práv. Jde o chybu v podpoře DCCP (Datagram Congestion Control Protocol). Do linuxového jádra se dostala v říjnu 2005. V upstreamu byla opravena 17. února (commit). Bezpečnostní chyba byla nalezena pomocí nástroje syzkaller [Hacker News].

Ladislav Hagara | Komentářů: 2
dnes 15:00 | Zajímavý software

Společnost Valve vydala novou beta verzi SteamVR. Z novinek lze zdůraznit oficiální podporu Linuxu. Další informace o podpoře této platformy pro vývoj virtuální reality v Linuxu v diskusním fóru. Hlášení chyb na GitHubu.

Ladislav Hagara | Komentářů: 0
dnes 06:00 | Nová verze

Po necelém roce od vydání verze 0.67 byla vydána verze 0.68 populárního telnet a ssh klienta PuTTY. Podrobnosti v přehledu změn. Řešeny jsou také bezpečnostní chyby.

Ladislav Hagara | Komentářů: 0
včera 21:32 | Nasazení Linuxu

Canonical představuje nejnovější verzi chytré helmy DAQRI s Ubuntu pro rozšířenou realitu. K vidění bude příští týden v Barceloně na veletrhu Mobile World Congress 2017.

Ladislav Hagara | Komentářů: 0
včera 21:31 | Pozvánky

Pro zájemce o hlubší znalosti fungování operačních systémů připravila MFF UK nový předmět Pokročilé operační systémy, v rámci něhož se vystřídají přednášející nejen z řad pracovníků fakulty, ale dorazí také odborníci ze společností AVAST, Oracle, Red Hat a SUSE. Tento předmět volně navazuje na kurz Operační systémy ze zimního semestru, ale pokud máte praktické zkušenosti odjinud (například z přispívání do jádra Linuxu) a chcete si

… více »
Martin Děcký | Komentářů: 6
včera 21:30 | Pozvánky

Czech JBoss User Group Vás srdečně zve na setkání JBUG v Brně, které se koná ve středu 1. března 2017 v prostorách Fakulty Informatiky Masarykovy Univerzity v místnosti A318 od 18:00. Přednáší Tomáš Remeš a Matěj Novotný na téma CDI 2.0 - New and Noteworthy. Více informací na Facebooku a na Twitteru #jbugcz.

mjedlick | Komentářů: 0
20.2. 23:45 | Zajímavý software

Na blogu Qt bylo představeno Qt 3D Studio. Jedná se o produkt dosud známý pod názvem NVIDIA DRIVE™ Design Studio. NVIDIA jej věnovala Qt. Jedná se o několik set tisíc řádků zdrojového kódu. Qt 3D Studio bude stejně jako Qt k dispozici jak pod open source, tak pod komerční licencí. Ukázka práce s Qt 3D Studiem na YouTube.

Ladislav Hagara | Komentářů: 10
20.2. 17:50 | Komunita

Nadace The Document Foundation (TDF) zastřešující vývoj svobodného kancelářského balíku LibreOffice slaví 5 let od svého oficiálního vzniku. Nadace byla představena 28. září 2010. Formálně byla založena ale až 17. února 2012.

Ladislav Hagara | Komentářů: 0
20.2. 12:50 | Komunita

Mozilla.cz informuje, že dosud experimentální funkce Page Shot z programu Firefox Test Pilot (zprávička) se stane součástí Firefoxu. Page Shot je nástroj pro vytváření snímků webových stránek. Umí výběr oblasti, prvku stránky (např. odstavce), nebo uložení snímku celé stránky. Snímky lze ukládat na disk nebo nahrávat na server Mozilly. Nedávno bylo oznámeno, že se součástí Firefoxu stane Activity Stream.

Ladislav Hagara | Komentářů: 52
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (13%)
 (2%)
 (71%)
 (4%)
 (10%)
Celkem 685 hlasů
 Komentářů: 66, poslední dnes 18:57
Rozcestník

Dotaz: Počet sloupců - výkon DB

16.1.2012 08:22 Radeczek
Počet sloupců - výkon DB
Přečteno: 1084×
Zdravím vás, před nějakou dobou jsem přebral databázi jednoho e-shopu, který prodává oblečení. V tabulce "produkty" jsou přirozeně uložené produkty. Jenže, někdo, kdo ten e-shop dělal, pouze předělával obchod s mobily tak, aby to prostě "nějak" fungovalo. Problém je v tom, že tabulka produkty má asi 50 sloupců, kde +- 20 jsou sloupce typu "GPRS", "INFRAPORT", "BATERIE", "PAMĚŤOVÁ KARTA" atp. A tyto sloupce jsou prázdné.

Můj dotaz tedy zní: "Má počet (ač prázdných) sloupců vliv na výkon databáze? (Rychlost složitějších joinů, počítání množství produktů v daných kategoriích atp.) ??"

Děkuji za reakce.

Řešení dotazu:


Odpovědi

16.1.2012 08:42 Filip Jirsák | skóre: 66 | blog: Fa & Bi
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Určitě to má vliv na šířku věty v databázi a tedy na to, kolik dat se musí načíst při sekvenčním čtení. Záleží samozřejmě na tom, jaké jsou to datové typy… Na dotazy, které využívají indexy, by to nemělo mít vliv.
16.1.2012 09:38 kuka
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
To asi zalezi na konkretni databazi, zda to vubec uklada a kolik to zabira mista. Napr. v Oracle se prazdne sloupce na konci radku vubec fyzicky neukladaji a pokud se prazdny sloupec uklada, zabira 1 byte. Obecne jakekoliv zbytecne nafouknuti radku vede k tomu, ze se do datoveho bloku vejde mene zaznamu a tedy se cte z disku vice bloku, mene zaznamu se vejde do cache atd., coz ma dopad na vykon (v ruznych scenarich samozrejme ruzne velky).
16.1.2012 09:56 Kit
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Zbytečné sloupce mají sice negativní vliv na výkon databáze, ale ve většině běžných případů bude ten výkonový propad stěží měřitelný. Zejména pokud ty sloupce jsou typu VARCHAR apod.
16.1.2012 11:54 radeczek | skóre: 7
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Abych to upřesnil... jedná se o MySQL databázi, tabulka má cca 80 sloupců z toho 25 je VARCHAR(255) a je to prázdné.

Někdo tady zmínil, že to sice zrychlí, ale nepatrně... tzn. Když mám dotaz, který trvá třeba 10s zlepší se to nějakou desetinku? Nebo třeba o sekundu?

Či bude vyřízení jednotlivých dotazů stejně rychlé, jen se db "odlehčí" - bude se méně číst z disku, více věcí se vleze do cache, ale na rychlost nějakých složitějších joinů a countů to moc extra vliv mít nebude. Je tak?
16.1.2012 12:16 Kit
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Pokud bude zpracování dotazu na tak malém objemu dat trvat 10 sekund, svědčí to spíš o tom, že je špatně napsán nebo že je chybný datový model. V takovém případě se odstranění nadbytečných sloupců na rychlosti téměř neprojeví.

Jinými slovy: Pokud to chceš předělat, začni u nového datového modelu, udělej ho znovu a pořádně. V opačném případě bych to nechal být. Nesystémovým odebíráním sloupců si moc nepomůžeš.

Samozřejmě se v tom můžeš vrtat pro zábavu, v tom ti bránit nebudu. Bude to hezčí a něco se přitom naučíš, ale bez radikální změny nějaké zrychlení nečekej.

Také můžeš změnit databázi.
16.1.2012 12:37 radeczek | skóre: 7
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Ok, těch 10s byl jen příklad. Jo DB je dost blbě (podle mě) udělaná, ale nějak zásadně to předělávat nebudu... je na to napojeno až moc věcí, aby to stálo za to úsilí. Objem dat je docela solidní (je tam kolem 60 000 položek, joiny jsou asi 3)

Nějak zvlášt řešit to teda nebudu. Spíš mě to jen tak zajímalo, nakolik by se to zrychlilo ;)

Dík moc.
17.1.2012 08:26 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Jestli je těch sloupců 80, tak je ta struktura postavená na hlavu bez ohledu na to, co to udělá s výkonem.
17.1.2012 11:35 radeczek | skóre: 7
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Jo, je to dost mizerně navržené... Prostě aby to "nějak" fungovalo bez ohledu na cokoliv jiného... Celé to předělávat nebudu, je na tom závislých několik desítek tísíc řádků opravdů _hnusného_ kódu. Je velice odstrašující případ proč kód prasit ;)

Šlo mi jen o to, zda by za minimální úsilí nešla ta DB trošku zrychlit ;)
17.1.2012 13:13 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Ono by koneckonců bylo divné, kdyby byl zprasený jen návrh databáze a aplikace už ne. :-)
13.2.2012 10:33 Pavel Kysilka
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
zdravim,

tak predelat to muzete. Vyuzijte pohledu/VIEW. Ona aplikace moc nepozna, ze se dotazuje na pohled nez na tabulku.

Me neco podobneho ceka na jedne moji starsi aplikaci, kde jsem tak nejak kombinoval nazvy sloupcu cesky a anglicky....

gf
16.1.2012 13:34 l0gik | skóre: 22
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Z hlediska výkonu bych to neřešil, pokud tam nebudou statisíce výrobků. Největší problém vidím v tom, že budeš chtít podle těch sloupců třeba někdy vyhledávat, což znamená padesát indexů - a to zaplácne cache databáze. Ale při dnešní ceně pamětí a očekávaný velikosti dat (předpokládám, že jde o eshop) to je asi jedno.

Spíš bych přemejšlel z hlediska architektury, jestli nestojí za to to předělat na spešl tabulku vlastnost - hodnota. Např. proto, že do týdle tabulky těžko uložíš dvě možné hodnoty, např. možnost volby dvou baterií a vůbec se s tím pracuje daleko lépe (např. výpis všech vlastností, vlastností patřících do dané skupiny, tvorba různých filtrů atd...).
10.2.2012 13:57 b0rmann | skóre: 15 | Pardubice
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
autor "databazi" je zrejme clovek z mozkem tezce poskozenym excelem, a o normalizaci zrejme neslysel ani v tramvaji.
--- Gott strafe Amerika
13.2.2012 02:09 FooBar
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
EAV je naprosto standardni metoda ukladani dat tohohle druhu, i kdyz nejde o relacni ukladani dat. Viz: http://en.wikipedia.org/wiki/Entity%E2%80%93attribute%E2%80%93value_model

Agresivni reakce je lepsi si setrit pro vetsi ulety :)
Josef Kufner avatar 21.1.2012 14:34 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Koukni na explain často používaných dotazů a udělej dobře indexy. Tím tomu asi pomůžeš nejlíp.

Pokud ty sloupečky nevyužíváš, tak je smaž. Udělej si jejich seznam, grepni zdrojáky a uvidíš sám.
Hello world ! Segmentation fault (core dumped)
27.1.2012 08:53 dzolo
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
DD,

pokud prázdné sloupce nejsou indexy, tak by to výkon nemělo ovlivnit. Problém bývá jen u indexů, které mají velký počet prázdných hodnot (NULL).
27.1.2012 20:40 Xerces
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
Tak jak jsi to popsal bych se v tom nevrtal (jak píše Kit?). 60k řádků je nic, záleží samozřejmě na čem to běhá. BTW: A o přepsání celýho systému včetně app neuvažuješ? :-) Jinak podle hesla, když něco funguje tak na to nesahej.
27.1.2012 20:54 Kit
Rozbalit Rozbalit vše Re: Počet sloupců - výkon DB
To souhlasí. Na tak malou databázi bych buď vůbec nesahal, anebo ji celou předělal. I obyčejné CSV na tak malém objemu dat často podá lepší výkon, než databáze indexovaná podle všech sloupců takto nesmyslně navržené tabulky.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.