abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 16:00 | Nová verze

Byl vydán Mozilla Firefox 51.0. Z novinek lze upozornit například na upozorňování na přihlašování přes nešifrované spojení (HTTP), podporu pro přehrávání bezeztrátového formátu FLAC nebo podporu WebGL 2. Podrobné informace v poznámkách k vydání a na stránce věnované vývojářům. Řešeny jsou také bezpečnostní chyby.

Ladislav Hagara | Komentářů: 1
včera 17:25 | IT novinky

Do prodeje (Farnell) se dostal jednodeskový počítač Tinker Board (unboxing). Jedná se o konkurenci Raspberry Pi 3 od společnosti Asus. Porovnání (jpg) těchto počítačů například na CNXSoft. Cena Tinker Boardu je 55 £.

Ladislav Hagara | Komentářů: 15
včera 14:44 | Zajímavý projekt

Byla zveřejněna pravidla hackerské soutěže Pwn2Own 2017, jež proběhne od 15. do 17. března v rámci bezpečnostní konference CanSecWes ve Vancouveru. Soutěžit se bude o více než milion dolarů v pěti kategoriích. Letos se bude útočit i na Ubuntu. Jedná se již o 10. ročník této soutěže.

Ladislav Hagara | Komentářů: 2
včera 13:33 | Nová verze

Po sedmi měsících vývoje od vydání verze 5.7 byla vydána verze 5.8 (YouTube) toolkitu Qt. Z novinek lze zmínit například Qt Lite pro vestavěná zařízení. Nově jsou plně podporovány moduly Qt Wayland Compositor (YouTube) a Qt SCXML (YouTube). Současně byla vydána verze 4.2.1 integrovaného vývojového prostředí (IDE) Qt Creator.

Ladislav Hagara | Komentářů: 1
včera 11:52 | Pozvánky

Lednový Prague Containers Meetup se koná ve čtvrtek 26. ledna 2017 od 18:00 v Apiary, Pernerova 49, Praha 8. Přijďte se podívat na přednášky o Enterprise Kubernetes a Jenkins as a code.

little-drunk-jesus | Komentářů: 0
včera 11:40 | Pozvánky

Program letošního ročníku konference Prague PostgreSQL Developer Days, která se koná již 15. a 16. února 2017 na ČVUT FIT, Thákurova 9, Praha 6, byl dnes zveřejněn. Najdete ho na stránkách konference včetně anotací přednášek a školení. Registrace na konferenci bude otevřena zítra (24. ledna) v brzkých odpoledních hodinách.

TomasVondra | Komentářů: 0
22.1. 02:20 | Zajímavý článek

David Revoy, autor open source webového komiksu Pepper&Carrot nebo portrétu GNU/Linuxu, upozorňuje na svém blogu, že nový Inkscape 0.92 rozbíjí dokumenty vytvořené v předchozích verzích Inkscape. Problém by měl být vyřešen v Inkscape 0.92.2 [reddit].

Ladislav Hagara | Komentářů: 0
22.1. 02:02 | Komunita

Øyvind Kolås, hlavní vývojář grafických knihoven GEGL a babl, které využívá grafický program GIMP, žádá o podporu na Patreonu. Díky ní bude moci pracovat na vývoji na plný úvazek. Milník 1000 $, který by stačil na holé přežití, se již téměř podařilo vybrat, dalším cílem je dosažení 2500 $, které mu umožní běžně fungovat ve společnosti.

xkomczax | Komentářů: 12
21.1. 23:54 | Pozvánky

DevConf.cz 2017, již devátý ročník jedné z největších akcí zaměřených na Linux a open source ve střední Evropě, proběhne od pátku 27. ledna do neděle 29. ledna v prostorách Fakulty informačních technologií Vysokého učení technického v Brně. Na programu je celá řada zajímavých přednášek a workshopů. Letos je povinná registrace.

Ladislav Hagara | Komentářů: 0
21.1. 22:11 | Nová verze

Byla vydána verze 1.0.0 emulátoru terminálu Terminology postaveného nad EFL (Enlightenment Foundation Libraries). Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (12%)
 (2%)
 (72%)
 (3%)
 (11%)
Celkem 395 hlasů
 Komentářů: 39, poslední dnes 19:30
Rozcestník
Reklama

Dotaz: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet

19.9.2010 17:11 v4it
php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Přečteno: 351×
Dobrý den, mám výpis uživatelů, kde spojuju informace o jedněch uživatelích ze 2 zdrojů: z ldapu(pokud má daný uživatel založen emailový účet, jinak se vrací null) a z mysql(pokud mají ftp účet, jinak se vrací null). Tyto informace spojím v jednom poli a povoluji řazení podle jména uživatele, emailové adresy, ftp kvóty apod. Je možnost řadit podle více klíčů najednou. Také omezuju výpis uživatelů třeba 15 najednou. Toto hezky funguje, ale poslední dobou, co narůstá počet uživatelů, se to stává hrozně pomalým. Není čemu se divit - musí se přečíst všichni uživatelé z obou zdrojů, v poli seřadit a pak na nich nasadit limit zobrazení. Potřeboval bych poradit s vhodnějším algoritmem na zpracování dat. Logicky se naskýtá možnost získat třeba 3 uživatele už rovnou seřazené z mysql, ale to nejde z následujícího důvodu:
username | sql/email | ldap/kvota
-----------------------------------------
usr1 | e@email.com | 500
usr2 | d@email.com | 500
usr3 | c@email.com | 500
usr4 | b@email.com | 500
usr5 | a@email.com | 500

Teď se rozhodnu seřadit je podle kvóty a pak podle emalu, tzn. ldap vrátí první 3, ty pak se ty tři seřadí jako c@..., d@..., e@... Správně by ale měl výpis vypadat takto:
usr5 | a@email.com | 500
usr4 | b@email.com | 500
usr3 | c@email.com | 500
Doufám v nějakou dobrou duši, která mi s tím pomůže :-)

Odpovědi

Josef Kufner avatar 19.9.2010 18:44 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Tak načti už z databáze/ldapu omezený počet, spoj to v programu a následně omez ještě jednou na požadovaný počet. Takže pokud chceš N záznamů, načteš max N z databáze, max N z ldapu a v programu seřadíš max 2N záznamů.

Pokud potřebuješ načítat data z databáze k položkám z ldapu i pokud nemají ftp účet, načítej ldap jako první a požadovaná ID z ldapu připiš do selectu (id IN (...)).

Pokud je situace ještě horší, zjisti si ID požadovaných záznamů z obou zdrojů v první sadě dotazů a vlastní seznam načti až napodruhé.
Hello world ! Segmentation fault (core dumped)
19.9.2010 19:33 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Ono je to ve skutečnosti malinko jinačí, uživatele už znám podle centrální databáze a jejich username, pak mi akorát teoreticky stačí najít odpovídající záznamy v ostatních zdrojích podle username, které se tady používá jako takový klíč, jenže tímto přístupem se odříznu od možnosti seřadit záznamy. Takové je schéma:

(-------PHP APLIKACE--------)--(centrální db v mysql)
  |           |           |
(ftp/mysql) (mail/ldap)  (*/*)...

Josef Kufner avatar 19.9.2010 19:47 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
V tom případě přidej vrstvu.
(-------PHP APLIKACE--------)--(centrální db v mysql)
                                        ||
                          (-------Backend manager-----)
                            |           |           |
                         (ftp/mysql) (mail/ldap)  (*/*)...
A v centrální DB si kešuj všechny potřebné informace. Update centrální DB pak spouštěj buď periodicky nebo občas při dotazu či nejlépe ať si každá služba aktualizuje svá data sama (pár scriptů to obstará; = backend manager).

Krom toho, že se ti výrazně zrychlí "PHP APLIKACE", tak si ušetříš starosti s přílišnou různorodostí služeb, resp. je vytlačíš stranou, kde nestraší.
Hello world ! Segmentation fault (core dumped)
19.9.2010 20:15 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
To s tou aktualizací nebude tak jednoduché. Dejme tomu že se rozhodnu z centrální aplikace změnit emailovou adresu nějakého uživatele, tzn. musím nejdříve aktualizovat cílovou databázi a při úspěchu aktualizovat i cache. Problém nastane z druhé strany kdy se třeba uživatel rozhodne že si změní heslo nebo se aktualizuje v db informace o využité kvótě - tam nemohu nijak zajistit, aby si sama ldap připojila k centrální databázi a tam informace aktualizovala. Zároveň nevím o žádném mechanismu, který by kontroloval, zda cache potřebuje aktualizaci (procházení všech zdrojů a porovnávání není dobrý mechanismus).
Josef Kufner avatar 19.9.2010 20:43 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Tak nemusíš procházet vše, stačí jen co se změnilo od poslední aktualizace. Obvykle bývá dostupný čas poslední změny, tak to snad nebude problém.

Jinak pokud něco změníš v nějaké službě, tak by to mělo být udělané tak, aby jsi se nemusel o aktalizaci kešovaných dat starat -- tedy ono se to postará samo při dalším zobrazení a dočasná nekonzistence nevadí.

Ale pokud s tímhle bude víc problémů než užitku, pořád můžeš rozdělit původní jedno kolo dotazů na dvě (viz první komentář).
Hello world ! Segmentation fault (core dumped)
19.9.2010 20:58 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Ono je to tak půl na půl - pokud bych vyřešil ten cache, tak mi odpadne starost se řazením záznamů (to obstará sql), odpadne starost s dočasnou nedostupností některých služeb, ale zase přibude starost jak aktualizovat záznamy (ne všechny služby si ukládají modified položku u uživatelů). Taky nevím jak bych ten cache měl tvořit. Logicky to vychází tak, že co služba, to tabulka v mysql, jenže bude problém u indexů a u datových typů v sql pokud se bude jednat o konverzi třeba z ldapu. Co se týče tvého prvního příspěvku - mohl bys to rozvést? Nějak jsem to úplně nepochopil - dejme tomu že mám X služeb, N uživatelů a M uživatelů u každé služby, kde M<=N.
Josef Kufner avatar 19.9.2010 22:34 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Starost s nedostupností služeb bych viděl jako celkem podstatný argument pro kešování. K updatům může pomoct i sledování logů (tail -f | ...). Navíc updaty budou jediný problém k řešení, zbytek je víceméně triviální. Také poznámka, že hodnoty označené hvězdičkou se aktualizují kadých 5 minut, nikoho nezarmoutí. A pokud uzavřeš aktualizaci do transakce, tak si nikdo ani nevšimne, že zrovna běží (místo skutečné transakce stačí použít nějaký příznak nový/starý).

To první jsem myslel tak, že v prvním kole uděláš dotaz na každou službu a získáš seznam max L uživatelů, kteří by se mohli objevit ve výsledném výpisu. (Kde L je počet položek na výpisu.) V druhém kole pak z této sady výsledků vytáhneš seznam ID uživatelů a zeptáš se centrální DB na tyto uživatele (select ... where id in (1, 2, 3, ...)). Výsledek nebude mít více než X×L položek a v PHP to pak celé spojíš a seřadíš. V lepším případě to seřadíš ještě v centrální DB a v PHP pak uděláš něco jako left join.
Hello world ! Segmentation fault (core dumped)
19.9.2010 23:06 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Starost s nedostupností služeb bych viděl jako celkem podstatný argument pro kešování.
I jako argument proti. Třeba služba ftp je nedostupná pro aplikaci php z důvodu částečného výpadku spojení, ale uživatelé ftp normálně používají a můžou si měnit hesla. PHP aplikace ale ftp službu nevidí a tak veškeré úpravy bude provádět lokálně. Ve chvíli kdy bude služba dostupná i pro php aplikaci nastane konflikt: aktualizovat cache podle služby nebo službu podle cache.

Jinak to s těmi částečnými dotazy je výborný nápad, asi to udělám tak, děkuju.
20.9.2010 00:54 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Ještě bych měl otázku: jakým způsobem řadit a vybírat uživatele, pokud bude více řazení nad stejnou službou? Např. řadit vzestupně s limitem 2 podle služeb(zde pro přehlednost uvádím přímo databáze) v tomto pořadí: mysql/email, mysql/maildir, ldap/uid, mysql/kvota. Musím použít 4 dotazy nebo mohu dotaz na mysql spojit v jeden? Bude to tak fungovat?
Josef Kufner avatar 20.9.2010 03:13 Josef Kufner | skóre: 66
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
PHP aplikace ale ftp službu nevidí a tak veškeré úpravy bude provádět lokálně.
Cache bude z pohledu aplikace read-only, takže nic takového nemůže nastat. Úpravy se udělají normálaně přímo s danou službou, jakoby žádná cache nebyla. Uživatel dostane potvrzení o úspěšnosti přímo od služby. Je to takové kolečko, které se otočí s každou provedenou úpravou.
Hello world ! Segmentation fault (core dumped)
20.9.2010 13:28 v4it
Rozbalit Rozbalit vše Re: php - Seřadit uživatele podle klíčů a zobrazit jich omezenýc počet
Tato cache u mě nemá šanci. Ta php aplikace je primárně určená k editaci uživatelů a pokud jí nebude schopná nemá cenu mít ani readonly cache. Nicméně k mé předchozí otázce: jakým způsobem řadit a vybírat uživatele, pokud bude více řazení nad stejnou službou? Např. řadit vzestupně s limitem 2 podle služeb(zde pro přehlednost uvádím přímo databáze) v tomto pořadí: mysql/email, mysql/maildir, ldap/uid, mysql/kvota. Musím použít 4 dotazy nebo mohu dotaz na mysql spojit v jeden? Bude to tak fungovat?

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.