abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
eParkomat, startup z ČR, postoupil mezi finalisty evropského akcelerátoru ChallengeUp!
Robot na pivo mu otevřel dveře k opravdovému byznysu
Internet věcí: Propojený svět? Už se to blíží...
včera 16:38 | Komunita

Byly zveřejněny videozáznamy přednášek a workshopů z letošní konference OpenAlt konané 5. a 6. listopadu v Brně. K videozáznamům lze přistupovat ze stránky na SuperLectures nebo přes program konference, detaily o vybrané přednášce nebo workshopu a dále kliknutím na ikonku filmového pásu. Celkově bylo zpracováno 65 hodin z 89 přednášek a workshopů.

Ladislav Hagara | Komentářů: 0
včera 11:30 | Komunita

Bylo oznámeno, že bude proveden bezpečnostní audit zdrojových kódů open source softwaru pro implementaci virtuálních privátních sítí OpenVPN. Audit provede Matthew D. Green (blog), uznávaný kryptolog a profesor na Univerzitě Johnse Hopkinse. Auditována bude verze 2.4 (aktuálně RC 1, stabilní verze je 2.3.14). Audit bude financován společností Private Internet Access [reddit].

Ladislav Hagara | Komentářů: 2
včera 06:00 | Komunita

Na YouTube byl publikován Blender Institute Reel 2016, ani ne dvouminutový sestřih z filmů, které vznikly za posledních 10 let díky Blender Institutu. V institutu aktuálně pracují na novém filmu Agent 327. Dění kolem filmu lze sledovat na Blender Cloudu. Videoukázka Agenta 327 z června letošního roku na YouTube.

Ladislav Hagara | Komentářů: 0
včera 01:02 | Zajímavý článek

Minulý týden byly vydány verze 1.2.3 a 1.1.7 webového poštovního klienta Roundcube. V oznámení o vydání bylo zmíněno řešení bezpečnostního problému nalezeného společností RIPS a souvisejícího s voláním funkce mail() v PHP. Tento týden byly zveřejněny podrobnosti. Útočník mohl pomocí speciálně připraveného emailu spustit na serveru libovolný příkaz. Stejně, jak je popsáno v článku Exploit PHP’s mail() to get remote code execution z roku 2014.

Ladislav Hagara | Komentářů: 1
8.12. 16:00 | Nová verze

Byla vydána verze 0.98 svobodného nelineárního video editoru Pitivi. Z novinek lze zmínit například přizpůsobitelné klávesové zkratky. Videoukázka práce s nejnovější verzí Pitivi na YouTube.

Ladislav Hagara | Komentářů: 1
8.12. 15:00 | Zajímavý software

Stop motion je technika animace, při níž je reálný objekt mezi jednotlivými snímky ručně upravován a posouván o malé úseky, tak aby po spojení vyvolala animace dojem spojitosti. Jaký software lze pro stop motion použít na Linuxu? Článek na OMG! Ubuntu! představuje Heron Animation. Ten bohužel podporuje pouze webové kamery. Podpora digitálních zrcadlovek je začleněna například v programu qStopMotion.

Ladislav Hagara | Komentářů: 5
7.12. 21:21 | Nová verze Ladislav Hagara | Komentářů: 0
7.12. 11:44 | Zajímavý projekt

Na Indiegogo byla spuštěna kampaň na podporu herní mini konzole a multimediálního centra RetroEngine Sigma od Doyodo. Předobjednat ji lze již od 49 dolarů. Požadovaná částka 20 000 dolarů byla překonána již 6 krát. Majitelé mini konzole si budou moci zahrát hry pro Atari VCS 2600, Sega Genesis nebo NES. Předinstalováno bude multimediální centrum Kodi.

Ladislav Hagara | Komentářů: 2
7.12. 00:10 | Nová verze

Byla vydána verze 4.7 redakčního systému WordPress. Kódové označením Vaughan bylo vybráno na počest americké jazzové zpěvačky Sarah "Sassy" Vaughan. Z novinek lze zmínit například novou výchozí šablonu Twenty Seventeen, náhledy pdf souborů nebo WordPress REST API.

Ladislav Hagara | Komentářů: 10
6.12. 12:00 | Zajímavý projekt

Projekt Termbox umožňuje vyzkoušet si linuxové distribuce Ubuntu, Debian, Fedora, CentOS a Arch Linux ve webovém prohlížeči. Řešení je postaveno na projektu HyperContainer. Podrobnosti v často kladených dotazech (FAQ). Zdrojové kódy jsou k dispozici na GitHubu [reddit].

Ladislav Hagara | Komentářů: 27
Kolik máte dat ve svém domovském adresáři na svém primárním osobním počítači?
 (32%)
 (24%)
 (29%)
 (7%)
 (5%)
 (3%)
Celkem 806 hlasů
 Komentářů: 50, poslední 29.11. 15:50
Rozcestník
Reklama

Dotaz: Multi-threading v embedded databazovej aplikacii

25.2.2010 17:34 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Multi-threading v embedded databazovej aplikacii
Přečteno: 206×
Dobrý deň vospolok, nemám skúsenosti s následujúcim problémom, preto Vás chcem poprosiť o rady/skúsenosti:

Jedná sa o lokálny server/daemon, ktorý bude mať 3 úlohy:
1) čakať na povely/žiadosti o dáta od klientskej aplikácie,
2) získavať dáta z hardware a ukladať ich a
3) poslúchať na TCP sockete a odosielať dáta podľa požiadania servera.
Rozmýšlam o POSIXových threadoch, ale nie som si istý či sa jedná o najlepšie riešenie. Pôvodne som si myslel, že SQLite bude dobré jednoduché úložisko, ale zistil som, že nepodporuje paralelný zápis aj čítanie(jedine zamykanie). Tak teraz uvažujem o textových súboroch. Lenže je možne dosiahnuť paralelné čítanie aj zápis? Pravdepodobne len so zámkami, ale obávam sa o výkon. Jedná sa totiž o embedded zariadenie a zápisy budú časté, niekoľko za sekundu, čítania zas až tak časté nebudú(raz za hodinu približne).

Myslíte, že je to dobrý nápad? Alebo uvažovať o nejakom embedded MySQL/Firebird? Ale, čo ten overhead?

Ešte jedna možnosť by bola sa na celé multi-threading veci vykašlať a riešiť to v rámci jednej event loop.

Ďakujem za odpovede.

Odpovědi

Fuky avatar 25.2.2010 17:47 Fuky | skóre: 52 | blog: 4u
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii

Chtělo by to více podrobností:

  1. Jaké množství dat budeš ukládat?
  2. Jakou strukturu budou mít data?
  3. Jak budeš data číst, všechna, výběr dle nějakého klíče?
  4. Kolik máš k dispozici paměti?
  5. Je potřeba data zachovat i při vypnutí HW?
25.2.2010 18:13 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
1. Množstvo dát bude závisiet od množstva prídavných kariet(tak do 10), z nich sa budú zbierať namerané hodnoty každú sekundu, teda je to štruktura typu {čas, hodnota}.

2. vid bod 1.

3. Z dát sa bude robiť štatistika každú hodinu, ale tak isto budú sa čítať podľa kľúča občasne a inak len externý server ich bude zbierať, teda opäť celý "súbor dát"

4. 64-128MB RAM, ešte presný model HW neviem. Na ukladanie asi 2GB SD karta alebo niečo podobné, to by ale malo stačiť na požadovanú dobu ukladania, tj. 1 mesiac.

5. Áno, integrita dát je zásadná.
25.2.2010 17:52 podlesh | skóre: 37 | Praha
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Existuje "multiprocess verze" klasické Berkley db: TDB (součást projektu Samba). Není to SQL, ale pořád lepší než textové soubory.
25.2.2010 18:15 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Ďakujem, môžem sa spýtať prečo sú textové súbory zlé, resp. prečo toto je lepšie?
pavlix avatar 25.2.2010 21:09 pavlix | skóre: 53 | blog: pavlix
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Z hlediska efektivity na tom bude nějaká lehká databázová knihovna líp než ukládání do jednotlivých souborů. Na souborech se taky hůř dělají transakce.

Ale mezi náma... git taky používá souborovou databázi a běhá jako hodinky. Dost záleží na účelu a taky návrhu aplikace.
GentooFedoraSCRAM – Jsem open source vývojář, nikoli markeťák ⇒ názory zde uvedené jsou jen mé vlastní.
26.2.2010 09:32 podlesh | skóre: 37 | Praha
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
No v podstatě je to totéž, ale už to udělal někdo jiný, dal si s tím dost práce a opravil spousty bugů. Obzvláště u poměrně používaného projektu.
AraxoN avatar 25.2.2010 21:52 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Sqlite pokiaľ viem podporuje paralelný zápis a čítanie, akurát zápis v jednej chvíli môže robiť najviac jedna transakcia. Ak zápis bude robiť len jeden proces naraz, tak by som v tom nevidel problém.
A fine is a tax for doing wrong. A tax is a fine for doing well.
25.2.2010 22:09 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Several computer processes or threads may access the same database without problems. Several read accesses can be satisfied in parallel. A write access can only be satisfied if no other accesses are currently being serviced, otherwise the write access fails with an error code (or can automatically be retried until a configurable timeout expires). This concurrent access situation would change when dealing with temporary tables.
Ak tomu rozumiem správne, tak zápis môže sa diať len pokiaľ sa nedeje čítanie. K tomu mi napadli dve veci: ako zabezpečiť aby sa nezapisovalo keď chcem čítat, resp. čo s tými dátami, budem ich zatiaľ nejako bufferovať a potom zapisovať? To je ale dosť hnusný hack.

Druhá vec je, že taký istý problém budem mať asi aj so súbormi.
AraxoN avatar 25.2.2010 22:29 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Áno, to sa píše na wikipedii. Na stránke Sqlite sa ale píše toto:
SQLite connections can open two kinds of transactions, read and write transactions. This is not done explicitly, a transaction is implicitly a read-transaction until it first writes to a database table, at which point it becomes a write-transaction.

At most one connection to a single shared cache may open a write transaction at any one time. This may co-exist with any number of read transactions.
Mám za to, že ak explicitne nezačneš v Sqlite transakciu, tak on do transakcie zabalí každý jeden SQL príkaz osobitne (t.j. každý príkaz sa vykoná ako BEGIN-príkaz-COMMIT). Takže zápisy sa vykonajú postupne v nejakom poradí, zatiaľčo čítanie to nijak neovplyvní. Ako sám píšeš, zamykanie budeš musieť riešiť aj pri iných uložiskách, a toto je podľa mňa vyriešené celkom dobre samo od seba.

Ale ber ma s rezervou, neskúšal som to, len tak mudrujem. :-) Radšej to prever na nejakom testovacom príklade.
A fine is a tax for doing wrong. A tax is a fine for doing well.
25.2.2010 22:51 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Ďakujem, vyzerá to sľubne.

Takže úložisko je už vyriešené. Čo sa vlákien týka, tak ich najlepšie použitie sa mi zdá ich nepoužiť:).

Ak existuje nejaký pádny dôvod ich použiť, tak prosím oň.
AraxoN avatar 26.2.2010 15:25 AraxoN | skóre: 45 | blog: slon_v_porcelane | Košice
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
K threadom sa Ti neviem vyjadriť - niekde sa hodia, niekde nie. Čo by som ale chcel ešte okomentovať je "niekoľko zápisov za sekundu". Podľa typu flashky je počet zápisov na to isté miesto obmedzený na rádovo 10-tisíc až milión, takže niekoľko zápisov za sekundu Ti tú flashku môže zabiť v horšom prípade za pár hodín, v lepšom za pár dní.
A fine is a tax for doing wrong. A tax is a fine for doing well.
26.2.2010 17:07 kovariadam | skóre: 12 | blog: biased | Košice/Brno
Rozbalit Rozbalit vše Re: Multi-threading v embedded databazovej aplikacii
Ďakujem, neviem ako som mohol na také niečo nemyslieť. Našťastie tam nebude flashka, ale normalný HDD. Tam tento problém síce možno nenastáva, ale aj tak uvažujem o cachovani dát napríklad po minútach. V kombinácií s baterkou by to malo byť už OK.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.