abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 23:45 | Zajímavý software

Na blogu Qt bylo představeno Qt 3D Studio. Jedná se o produkt dosud známý pod názvem NVIDIA DRIVE™ Design Studio. NVIDIA jej věnovala Qt. Jedná se o několik set tisíc řádků zdrojového kódu. Qt 3D Studio bude stejně jako Qt k dispozici jak pod open source, tak pod komerční licencí. Ukázka práce s Qt 3D Studiem na YouTube.

Ladislav Hagara | Komentářů: 5
včera 17:50 | Komunita

Nadace The Document Foundation (TDF) zastřešující vývoj svobodného kancelářského balíku LibreOffice slaví 5 let od svého oficiálního vzniku. Nadace byla představena 28. září 2010. Formálně byla založena ale až 17. února 2012.

Ladislav Hagara | Komentářů: 0
včera 12:50 | Komunita

Mozilla.cz informuje, že dosud experimentální funkce Page Shot z programu Firefox Test Pilot (zprávička) se stane součástí Firefoxu. Page Shot je nástroj pro vytváření snímků webových stránek. Umí výběr oblasti, prvku stránky (např. odstavce), nebo uložení snímku celé stránky. Snímky lze ukládat na disk nebo nahrávat na server Mozilly. Nedávno bylo oznámeno, že se součástí Firefoxu stane Activity Stream.

Ladislav Hagara | Komentářů: 25
včera 04:10 | Nová verze

Po 10 týdnech vývoje od vydání Linuxu 4.9 (zprávička) oznámil Linus Torvalds, mj. již 20 let žijící v USA, vydání Linuxu 4.10 (LKML). Přehled nových vlastností a vylepšení například na Kernel Newbies a v Jaderných novinách (1, 2 a 3). Kódové jméno Linuxu 4.10 je Fearless Coyote.

Ladislav Hagara | Komentářů: 10
19.2. 15:55 | Zajímavý projekt

Vyzkoušet si příkazy a vyřešit několik úkolů lze na stránkách Commandline Challenge (CMD Challenge). Úkoly lze řešit různými způsoby, důležitý je výsledek. Zdrojové kódy jsou k dispozici na GitHubu pod licencí MIT.

Ladislav Hagara | Komentářů: 18
18.2. 17:35 | Bezpečnostní upozornění

Německá Bundesnetzagentur (obdoba českého ČTU) zakázala na německém území prodej panenky Cayla kvůli „špionáži“ dětí. Tato elektronická hračka obsahuje mikrofon, reproduktor a kameru a bezdrátové komunikační rozhraní, pomocí kterého se hračka připojuje na servery výrobce. Takovýmto způsobem může hračka pomocí umělé inteligence „odpovídat“ na dotazy dítěte. Hlavní problém bude ale asi někde jinde, podle prvotních zpráv může

… více »
Petr Tomášek | Komentářů: 34
17.2. 15:30 | Bezpečnostní upozornění

CSIRT.CZ upozorňuje, že bezpečnostní experti objevili nový typ malwaru, jenž cílí na open source e-commerce platformu Magento. Malware je zajímavý tím, že se jedná o první svého druhu, jehož kód zůstává skrytý v SQL databázi zasaženého e-shopu. Škodlivý kód je volán pomocí tzv. SQL trigerru, který je spouštěn při každém vytvoření objednávky v systému.

Ladislav Hagara | Komentářů: 5
17.2. 09:00 | Nová verze

Bylo vydáno Ubuntu 16.04.2 LTS, tj. druhé opravné vydání Ubuntu 16.04 LTS s kódovým názvem Xenial Xerus. Přehled novinek v poznámkách k vydání a v přehledu změn.

Ladislav Hagara | Komentářů: 60
17.2. 06:00 | Zajímavý článek

Pavel Tišnovský se v dvoudílném článku na MojeFedora.cz věnuje tvorbě pluginů (modulů) pro bitmapový grafický editor GIMP. Pomocí pluginů lze GIMP rozšiřovat o další funkce. Implementovat lze například nové filtry nebo pomocné utility pro tvorbu animací či poloautomatickou retuš snímků.

Ladislav Hagara | Komentářů: 6
16.2. 23:32 | Komunita

Do 30. března se lze přihlásit do dalšího kola programu Outreachy, jehož cílem je přitáhnout do světa svobodného a otevřeného softwaru lidi ze skupin, jež jsou ve světě svobodného a otevřeného softwaru málo zastoupeny. Za 3 měsíce práce, od 30. května do 30. srpna 2017, v participujících organizacích lze vydělat 5 500 USD. Jedná se již o 14. kolo tohoto programu.

Ladislav Hagara | Komentářů: 11
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (13%)
 (2%)
 (72%)
 (3%)
 (10%)
Celkem 675 hlasů
 Komentářů: 61, poslední dnes 13:06
Rozcestník
Reklama

Dotaz: ktoru databazu?

disposable avatar 8.5.2008 21:38 disposable | skóre: 23
ktoru databazu?
Přečteno: 845×
Potrebujem pomoc s vyberom databazoveho systemu pre nasledovne - mam jednu tabulku, ktora vyzera takto:

phone - phoneservice0207xxxxxxx - 0207xxxxxxx@customername.sip.ourdomain.net

0207yyyyyyy - 0207yyyyyyy@othercustomer.sip.ourdomain.net

.

.

. .

celkovo ma 4 miliony riadkov a je to databaza aliasov pre OpenSER.

mam nasledovne poziadavky:

- databaza musi zvladnut az 30 000 READS behom jednej sekundy

- co sa tyka updatov, tie budu velmi zriedkave, na tie nemam ziadne poziadavky

a teraz otazky:

Zvladne toto MySQL s InnoDB? nemal by som radsej pouzit nejaku BerkeleyDB?

pobezi to na 4 jadrovom Xeone, 16GB RAM. RAID-5 uscsi 320. Viem ze to budem musiet aj otestovat, teda neocakavam odpoved po ktorej sa do toho vrhnem, staci nasmerovanie od ludi so skusenostami.
if it ain't broke, don't fix it

Odpovědi

Martin Tůma avatar 9.5.2008 00:34 Martin Tůma | skóre: 38 | blog: RTFM | Praha
Rozbalit Rozbalit vše Re: ktoru databazu?

Použil bych klidně MySQL ale s MyISAM, protože dle dostupných informací je MyISAM při takovýchto tabulkách mnohem rychlejší. Vlastnosti, který přináší InnoDB oproti MyISAM (např. transakce) při plánovaném využití nepotřebuješ.

Každý má právo na můj názor!
9.5.2008 08:46 Zdeněk Burda | skóre: 61 | blog: Zdendův blog | Praha
Rozbalit Rozbalit vše Re: ktoru databazu?
A co zkusit zauvažovat nad adresářovým serverem?
-- Nezdar není hanbou, hanbou je strach z pokusu.
disposable avatar 9.5.2008 11:24 disposable | skóre: 23
Rozbalit Rozbalit vše Re: ktoru databazu?
no, kedze o berkeleydb neviem skoro nic, tak jedina implementacia ktora ma napadla by bol openldap. ale nevyguglil som ziadne porovnanie rychlosti ktore by bralo do uvahy viac nez 10.000 entries a uz vobec nic kde by niekto potreboval 30K pristupov za sekundu. mate podobnu skusenost?
if it ain't broke, don't fix it
9.5.2008 11:41 Roman DAVID | skóre: 24 | Brno
Rozbalit Rozbalit vše Re: ktoru databazu?
IMHO je BerkeleyDB urcena presne pro Vas pripad -> jednoducha struktura DB, hodne selectu, malo insertu
disposable avatar 9.5.2008 11:52 disposable | skóre: 23
Rozbalit Rozbalit vše Re: ktoru databazu?
vyzera to tak. tu ide skor o to, ze o berkeleydb neviem absolutne nic, teda otazka je skor polozena ci to mysql zvladne, alebo sa musim pustit do technologie ktoru nepoznam (proti comu nemam namietky, ale rad by som sa tomu vyhol ak mozem). v mysql sa viem aspon orientovat, aj ked niesom profesionalny dbadmin.

mam este tyzden kym to budem musiet implementovat, takze dost casu sa zorientovat, spustit 24 hodinovy test a porovnavat.
if it ain't broke, don't fix it
11.5.2008 08:43 razor | skóre: 32
Rozbalit Rozbalit vše Re: ktoru databazu?
Ahoj, možná by tě mohlo zajímat, že ve starších verzích mysql se dá použít jako storage engine právě berkleydb.
AraxoN avatar 9.5.2008 11:20 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Ak tie updaty budú naozaj veľmi zriedkavé, ak tá databáza bude obsahovať naozaj len to čo si tu napísal a ak sa k nej bude pristupovať podľa celého kľúča, nie podľa LIKE, tak by som zvážil DB4. Len tak zo srandy som teraz skúsil v PHP vyrobiť skript, ktorý zapíše 4 mil. záznamov a ďalší, ktorý potom 30 tis. prečíta. Na notebooku Celeron 1.3, 768MB RAM, trvalo čítanie 30 tisíc záznamov 0.712 sekundy.
A fine is a tax for doing wrong. A tax is a fine for doing well.
disposable avatar 9.5.2008 11:43 disposable | skóre: 23
Rozbalit Rozbalit vše Re: ktoru databazu?
dakujem za ten test, aj ked si niesom isty ci je relevantny, kedze tych 30K reads nebude v jednej operacii, ale v 30K osobitnych. db4 je berkeleydb, nie? mohol by si mi prosim poslat ten skript nech sa nieco naucim?
if it ain't broke, don't fix it
AraxoN avatar 9.5.2008 11:51 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Přílohy:
Viď prílohy.
A fine is a tax for doing wrong. A tax is a fine for doing well.
AraxoN avatar 9.5.2008 11:46 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Alebo ak to má byť SQL, tak na výbery (30k za sekundu) použiť medzičlánok memcached, tak aby sa do databázy liezlo až vtedy, keď výsledok nebude v cache.
A fine is a tax for doing wrong. A tax is a fine for doing well.
disposable avatar 9.5.2008 12:01 disposable | skóre: 23
Rozbalit Rozbalit vše Re: ktoru databazu?
dik ale to nebude treba. zatial vzdy ked som dobre nakonfiguroval dbms a velkost databazy bola mensia nez RAM, aj tak skoncila cela DB v ramke. a tato tabulka bude mat menej nez pol gigabajtu.
if it ain't broke, don't fix it
9.5.2008 11:31 core
Rozbalit Rozbalit vše Re: ktoru databazu?
Co takhle CDB? i kdyz to neni moc databaze :) A proc RAID-5 - na databazi bych dal radsi RAID-10, i kdyz to asi bude vetsinout nacachovane v ramce..
disposable avatar 9.5.2008 11:58 disposable | skóre: 23
Rozbalit Rozbalit vše Re: ktoru databazu?
jednoduchost tej CDB sa mi velmi paci, licencia je humus, uz stahujem freecdb a idem sa pohrat. a raid5 preto, lebo mam len 3 disky.
if it ain't broke, don't fix it
9.5.2008 23:10 antiVISTA
Rozbalit Rozbalit vše Re: ktoru databazu?
No to je fajn, vela sa uz popisalo o "rychlosti databaz", mna by skor zaujimalo, ako by to bolo rychle s PostgreSQL. Povedzme najnovsia verzia na Freebsd a intel quad core, 8 GB RAM a SATA RAID 1 (mirroring). Uznavam, ze to bude asi tazke posudit...
AraxoN avatar 10.5.2008 12:43 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Nemám síce na notebooku quad core ani raid1, ale dal som sa do testovania. Možno to večer ešte skúsim na nejakom lepšom produkčnom serveri...

Moje výsledky pre Postgres nevychádzajú príliš priaznivo - 4M záznamov, 30k náhodných čítaní, podľa jednotlivých druhov databáz, resp. úložísk:
BerkleyDB (db4) - 0.699s
memcached       - 2.585s
MySQL (MyISAM)  - 7.124s
sqlite          - 20.448s
PostgreSQL      - 96.241s
Z môjho pohľadu veľmi príjemne prekvapil db4 a MySQL, naopak Postgres a memcache boli značným sklamaním.
A fine is a tax for doing wrong. A tax is a fine for doing well.
10.5.2008 13:42 antiVISTA
Rozbalit Rozbalit vše Re: ktoru databazu?
Fuuuu, no az taky debakel som teda u Pg necakal. Velka vdaka.
AraxoN avatar 10.5.2008 16:28 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Možno to chce vytunovať nejaké parametre, aj keď ten MySQL to zvládol v default inštalácii. Pravdepodobne bude zlý výsledok postgresu zapríčinený malou RAM na disk cache - keď som pozeral, tak v MySQL tabuľka zabrala nejakých 230MB, zatiaľčo v postgresi asi 300 + 150 index. Tým pádom sa celý súbor nevošiel do pamäte a mnoho času strávil čakaním na disk. Neviem prečo to zaberalo tak veľa, púšťal som na to aj VACUUM, ale bez výsledku.
A fine is a tax for doing wrong. A tax is a fine for doing well.
AraxoN avatar 10.5.2008 17:58 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
Tak som to teraz testol ešte na inej mašine (Core2 Duo 2.66GHz, 64bit, 4GB RAM, RAID1), a výsledky sú:
BerkleyDB (db4) - 0.494s
sqlite          - 1.537s
MySQL (MyISAM)  - 2.002s
PostgreSQL      - 4.997s
memcached       - masked pre 64bit, t.j. netestované
T.j. nie až taký debakel, aj keď postgres z toho aj tak zvlášť dobre nevychádza. Na druhej strane, používame ho a ceníme si ho nie preto, že vie slúžiť ako rýchla hash-tabuľka, ale preto, že má aj nejaké tie funkcie naviac... ;-)
A fine is a tax for doing wrong. A tax is a fine for doing well.
10.5.2008 16:30 fixinko | skóre: 15 | Bratislava
Rozbalit Rozbalit vše Re: ktoru databazu?
bola ta databaza v pgsql vhodne oindexovana?
AraxoN avatar 10.5.2008 17:06 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
araxon=# \d speed_test
       Table "public.speed_test"
 Column |       Type        | Modifiers 
--------+-------------------+-----------
 num    | character(7)      | not null
 val    | character varying | not null
Indexes:
    "speed_test_pkey" PRIMARY KEY, btree (num)
Po inserte všetkých riadkov som ešte spravil VACUUM ANALYZE. Problém bol asi v tom, že súbor s databázou a indexom bol väčší než voľná RAM a tak sa do diskovej cache celý nezmestil - narozdiel od všetkých ostatných DB čo som skúšal. Je pravda, že miesto char som mohol použiť radšej numeric, ale char som použil aj vo všetkých ostatných DB...
A fine is a tax for doing wrong. A tax is a fine for doing well.
10.5.2008 22:38 Radim Kolář | skóre: 11
Rozbalit Rozbalit vše Re: ktoru databazu?
Testnul jsem to na DB2 Express-C 9.5.1/linux ia32 a na stroji s 512MB RAM a jednim diskem dela 3263 random selectu/sec v default nastaveni databaze, coz je 4MB io buffer, takze je to CPU bound a vsechen CPU cas je pozran v sys time.

Vysledny cas je 9.1s. Vysledek plne srovnatelny s MySQL/ISAM a je to podnikova databaze (toho casu zdarma).

Oracle je o chlup pomalejsi nez Pgsql v tehlech workloadech, ale na tomhle stroji s 512mb ram by mne nebezel, takze jsem ho netestil.

zajimala by mne mysql/innodb
AraxoN avatar 11.5.2008 01:14 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: ktoru databazu?
MySQL (MyISAM)  - 7.124s
MySQL (InnoDB)  - 9.293s
Rozdiel nijak zvlášť veľký... ale trvalo mi hodnú chvíľu, kým som to na InnoDB vôbec rozbehol. Defaultne je to nastavené tak, že InnoDB zaberá max. 128M a riadky, ktoré sa tam nezmestia majú proste smolu. Navyše pri OPTIMIZE TABLE to potrebuje ďalší priestor, lebo inak optimize zlyhá a rýchlosť výberu je potom nič moc. A ešte pri insertovaní v rámci transakcie som pozeral z druhej transakcie na počet riadkov, a ten sa priebežne menil - to by som nenazýval "transaction isolation". V postgrese toto chodilo predvídateľnejšie - kým som nedal commit, tak som videl počet riadkov nula...
A fine is a tax for doing wrong. A tax is a fine for doing well.
11.5.2008 11:44 Ladicek | skóre: 28 | blog: variace | Havlíčkův brod
Rozbalit Rozbalit vše Re: ktoru databazu?
pri insertovaní v rámci transakcie som pozeral z druhej transakcie na počet riadkov, a ten sa priebežne menil - to by som nenazýval "transaction isolation"
Tak buďto to nebyla transakce (autocommit), nebo jste měl isolation level nastavený na read uncommitted, to se stává i v lepších rodinách :-)
Ještě na tom nejsem tak špatně, abych četl Viewegha.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.