abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

včera 20:55 | Komunita

Od 18. do 21. května proběhla v Saint-Étienne Linux Audio Conference 2017. Na programu byla řada zajímavých přednášek a seminářů. Videozáznamy přednášek lze zhlédnout na YouTube. K dispozici jsou také články a prezentace.

Ladislav Hagara | Komentářů: 0
včera 20:44 | IT novinky

Hodnota Bitcoinu, decentralizované kryptoměny, překonala hranici 2 200 dolarů. Za posledních 30 dnů tak vzrostla přibližně o 80 % [reddit].

Ladislav Hagara | Komentářů: 0
včera 17:33 | Nová verze

Po 5 měsících vývoje od vydání verze 0.12.0 byla vydána verze 0.13.0 správce balíčků GNU Guix a na něm postavené systémové distribuce GuixSD (Guix System Distribution). Na vývoji se podílelo 83 vývojářů. Přibylo 840 nových balíčků. Jejich aktuální počet je 5 454. Aktualizována byla také dokumentace.

Ladislav Hagara | Komentářů: 1
včera 17:22 | Nová verze

Po 5 měsících vývoje a 3 týdnech intenzivního testování byla vydána verze 12 open source systému Nextcloud, forku ownCloudu, umožňujícího provoz vlastního cloudového úložiště. Přehled novinek i s videoukázkami v poznámkách k vydání. Pro vyzkoušení je k dispozici demo.

Ladislav Hagara | Komentářů: 2
včera 11:44 | Zajímavý článek

Týden po prvním číslu publikoval Michal Špaček na svých stránkách druhé číslo newsletteru věnovanému bezpečnosti, bezpečnému vývoji převážně webových aplikací a bezpečnosti uživatelů. Věnuje se výpadku Let's Encrypt, únikům dat, bug bounty pro WordPress nebo SQL Injection v Joomla. Zmiňuje také, že Mozilla plánuje z Firefoxu odstranit podporu pro Encrypted Media Extensions (EME) na nešifrovaném HTTP a nadále pro EME vyžadovat HTTPS.

Ladislav Hagara | Komentářů: 0
včera 02:00 | Pozvánky

Ve středu 31. května 2017 od 17:00 proběhne v pražské pobočce SUSE Den otevřených dveří v SUSE. Čekají vás přednášky o live kernel patchingu a nástroji SaltStack. Také se dozvíte zajímavé informace o SUSE, openSUSE, a vlastně všech produktech, na kterých lidé ze SUSE pracují.

Ladislav Hagara | Komentářů: 4
včera 01:00 | Pozvánky

Czech JBoss User Group srdečně zve na setkání JBUG v Brně, které se koná ve středu 7. června 2017 v prostorách Fakulty informatiky Masarykovy univerzity v místnosti A318 od 18:00. Přednáší Tomáš Livora na téma Fault Tolerance with Hystrix. Více informací na Facebooku a Twitteru #jbugcz.

mjedlick | Komentářů: 0
19.5. 23:22 | Zajímavý projekt

Na Texture Ninja je volně k dispozici více než 4 tisíce textur. Autora lze podpořit na Patreonu.

Ladislav Hagara | Komentářů: 0
19.5. 10:22 | Pozvánky

Mozilla.cz zve na MozBeer Prague #2. Druhé setkání Mozilla.cz proběhne 26. května od 18:00 v Praze v Diversion Bistru v ulici Mělnická.

Ladislav Hagara | Komentářů: 0
18.5. 23:22 | Bezpečnostní upozornění

Průvodce restauracemi Zomato, jenž v roce 2014 koupil Lunchtime.cz, potvrdil bezpečnostní problém. Odcizeno bylo 17 miliónů záznamů o uživatelích (jména, emailové adresy, osolené hashe).

Ladislav Hagara | Komentářů: 8
Chystáte se pořídit CPU AMD Ryzen?
 (6%)
 (32%)
 (1%)
 (8%)
 (44%)
 (9%)
Celkem 588 hlasů
 Komentářů: 62, poslední 19.5. 01:57
    Rozcestník

    Dotaz: MYSQL generovanie štatistických prehľadov

    8.1.2012 18:42 adrinko | skóre: 22
    MYSQL generovanie štatistických prehľadov
    Přečteno: 451×
    Zdravím,

    prosím o vaše názory, čo je najvhodnejšie v takomto prípade. Mám v phpčku spravený systém, kde si registrovaní užívatelia zadávajú svoje tasky na dnešný deň. Chcel by som teraz, vypísať povedzme mesačnú (alebo aj dlhšiu) krivku pre užívateľa, koľko taskov mal v ktorý deň a z toho by sa mu zobrazila krivka podobne, ako google analytics. Následne ja ako admin by som chcel tiež podobnú krivku, kde by zobrazilo sumár taskov v jednotlivé dni pre všetkých užívateľov.

    Otázka teraz je - ako je to najlepšie spraviť s ohľadom na databázu? Je mi jasné, že keby sa to spočítavalo vždy na základe dotazu stránky, tak by sa rôzne výpočti na konkrétne dni opakovali a zbytočne tak viackrát zaťažovali celý systém. Mne sa zdá najlepšie, keď sa pre každý deň uloží do db výsledok a pokiaľ znova nastane potreba zobraziť daný deň, tak sa už nebudú všetky tasky pre daného užívateľa znovu spočítavať, ale sa len jednoducho už predtým spočítaný výsledok načíta z db. Čo poviete? (niečo na spôsob "cachovania" jednotlivých dotazov..) Ešte som také niečo nikdy nepotreboval spraviť, preto uvítam vaše názory. Vďaka!

    Odpovědi

    8.1.2012 19:06 Kit
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    O potřebné cachování se stará přímo SQL server.

    Pokud bys měl problém s výkonem při poskytování výstupů, můžeš optimalizovat SELECT, případně doplnit potřebné indexy. Nebo můžeš při ukládání záznamů aktualizovat pomocí triggeru nějakou agregační tabulku (i více) s předzpracovanými výstupy.

    Každé řešení má své výhody i nevýhody. Záleží na tom, zda se častěji zapisuje nebo čte. Pokud by i nadále byly problémy s výkonem, sáhl bych po jiné databázi.
    okbob avatar 8.1.2012 19:46 okbob | skóre: 30 | blog: systemakuv_blog | Benešov
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    záleží na zátěži - na objemech dat - na tom, jak budete mít omezené reporty v historii

    Od určitých objemů je nutné dělat preagregace - tam sama o sobě žádná relační databáze nepomůže - nicméně chce to řešit pokud počítáte, že se dostanete nad milióny řádků a budete růst. Vytvořte si databázi a naplňte jí, tak jak bude vypadat za cca 7 let provozu - a vyzkoušejte si rychlost dotazů (pokud možno paralelně). Pokud budou dostatečně rychlé, tak nic nemusíte řešit - jinak buďto přemýšlejte nad zadáním (např. omezit rozsah reportu na poslední 3 měsíce) nebo nad formou materializace - preagregace.
    9.1.2012 15:00 l0gik | skóre: 22
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    IMHO rychlejší než dělat testy je udělat si tu preagregaci rovnou - jde o tři triggery a jednu tabulku, to je hotový za chviličku.
    12.1.2012 01:27 adrinko | skóre: 22
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    vďaka za typy. l0gik, z tvojho príspevku to vyzerá fakt jednoducho:) aké 3 triggery si myslel? viete o nejakom návode na toto...? je síce fakt, že o triggeroch som už čítal, ale ešte som ich nikdy nepoužil. vďaka!
    12.1.2012 13:49 l0gik | skóre: 22
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    Tabulka: klíč(uživatel, den), počet operací No jednoduchej trigger: při insertu inkrementovat záznam v tabulce, popř. založit novej při delete dekrementovat a při updatu, pokud se změní den nebo uživatel províst obojí.

    Nepíšeš, kterej je to sql server, tak těžko dám návod, dělá se to v každym trochu jinak, ale když hodíš např. mysql (nebo co máš) trigger do nápovědy, tak to najdeš hned.

    Třeba k mysql najdeš nápovědu tady: http://dev.mysql.com/doc/refman/5.0/en/create-trigger.html

    Řešil bych to takhle tak řádově od stotisíc záznamů, desettisíc Ti db spočítá jak nic.
    12.1.2012 09:55 Kit
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    Do 10k záznamů nemá moc smysl řešit ani indexy, ani triggery. Do 1M vystačíš s indexy.

    Záleží tedy na objemu dat. Podle popisu soudím, že preagregaci zřejmě potřebovat nebudeš.
    12.1.2012 10:42 kuka
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    To je myslim prilis zjednodusujici. Pokud jde o hodne zatizeny system (nebo se to do budoucnosti predpoklada), tak pro 1M (a i mene) zaznamu bude hodne velky rozdil, jestli se data prectou z pripravene tabulky, nebo se museji online naagregovat. Co kdyby si napriklad statistiku soucasne zobrazovalo 100 konkurentnich uzivatelu?
    12.1.2012 10:56 Kit
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    Je to zjednodušující. Nevíme vůbec nic o budoucí zátěži. Řešit tuto záležitost triggery na několika stovkách záznamů je overkill, zejména pokud se statistiky budou zobrazovat třeba jen 1x denně.

    Denormalizace se má dělat až když je patrné, že to bude líné.
    Josef Kufner avatar 18.1.2012 21:17 Josef Kufner | skóre: 67
    Rozbalit Rozbalit vše Re: MYSQL generovanie štatistických prehľadov
    V zádadě máš dvě možnosti:

    1. Udělat select a počítat to na požádání.

    2. Každý den posčítat včerejšek a uložit si to. Postupem času staré záznamy agregovat do méně podrobných (posčítat dny do týdnů či měsíců).

    Nedávno jsem si naprogramoval do jednoho systému tu první možnost a výsledný select není vůbec hezký. Pokud bude uživatelů více a dat hodně, nebude to stíhat a indexy to nezachrání.

    Na cachování v SQL serveru se nespoléhej, než si tytéž data vyžádá uživatel znovu, ostatní je z cache vypláchnou.
    Hello world ! Segmentation fault (core dumped)

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.