abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

včera 23:55 | IT novinky

Google na YouTube oficiálně představil Android 8.0 Oreo. Přehled novinek v příspěvku na blogu věnovaném vývojářům.

Ladislav Hagara | Komentářů: 1
včera 16:44 | Zajímavý článek

Po téměř 3 měsících od vydání třetího čísla publikoval Michal Špaček na svých stránkách čtvrté číslo newsletteru věnovanému bezpečnosti, bezpečnému vývoji převážně webových aplikací a bezpečnosti uživatelů. Jedná se současně o číslo poslední: "Nepíše se mi to lehce, a trvalo to, než jsem to ze sebe dostal, ale tohle je poslední newsletter v této podobě. Ani jsem ho nestihl pojmenovat a už jsem ho zabil. Nezbývá mi tolik času, abych každou událost, novinku a změnu v prohlížeči detailně popisoval tak, jak bych v newsletteru chtěl, mrzí mě to".

Ladislav Hagara | Komentářů: 0
včera 07:00 | Nová verze

Byla vydána diaspora* ve verzi 0.7.0.0. Jedná se o svobodný software, který slouží jako osobní webový server pro poskytování služeb sociální sítě (Wikipedie). Přehled novinek v příspěvku na blogu a na GitHubu. Sociální síť diaspora* byla před pěti lety předána komunitě.

Ladislav Hagara | Komentářů: 0
včera 06:00 | IT novinky

Společnost Hardkernel stojící za jednodeskovými počítači ODROID představila na YouTube minipočítač určený pro domácí cloud ODROID-HC1 vycházející z ODROID-XU4. Minipočítač s kovovou krabičkou, do které stačí vložit 2 a půl palcový disk, lze koupit za 49 dolarů. ODROID-HC1 je stohovatelný.

Ladislav Hagara | Komentářů: 26
20.8. 16:22 | Nová verze

Byl vydán DB Browser for SQLite (sqlitebrowser) ve verzi 3.10.0. Nejnovější stabilní verze této grafické nadstavby nad relačním databázovým systémem SQLite (Wikipedie) přináší například integraci s DBHub.io, tj. platformou pro sdílení SQLite databází. Podrobnosti na GitHubu.

Ladislav Hagara | Komentářů: 2
20.8. 08:00 | IT novinky

Andy Rubin, spoluzakladatel společnosti Android, jež byla v roce 2005 koupena Googlem, nyní CEO společnosti Essential Products, oznámil předprodej chytrého telefonu Essential. Telefon se začne rozesílat 1. září. Cena telefonu je 699 dolarů. Cena telefonu současně s 360° kamerou s rozlišením 4K byla stanovena na 749 dolarů. Kameru, v budoucnu i další příslušenství, lze k telefonu připojit pomocí konektoru s magnety.

Ladislav Hagara | Komentářů: 0
19.8. 13:44 | Zajímavý software

Evropská komise vydala novou verzi 1.4.0.1 svého open source v Javě naprogramovaného softwaru pro online průzkumy EUSurvey. Online dotazníky lze vytvářet na stránkách Evropské komise nebo si lze software stáhnout (zip a war) a nainstalovat lokálně. Zdrojové kódy jsou k dispozici pod licencí EUPL (European Union Public Licence).

Ladislav Hagara | Komentářů: 0
18.8. 23:55 | Komunita

Ubuntu 17.10 (Artful Aardvark) bude ve výchozím stavu zobrazovat Dok (Launcher). Jedná se o rozšíření GNOME Shellu Ubuntu Dock. To bylo forknuto z rozšíření Dash to Dock. Ukázka na YouTube [reddit].

Ladislav Hagara | Komentářů: 8
17.8. 15:33 | Nová verze

Byla vydána verze 17.08.0 KDE Aplikací (KDE Applications). Přehled novinek v kompletním seznamu změn a na stránce s dalšími informacemi. Aplikace kmag, kmousetool, kgoldrunner, kigo, konquest, kreversi, ksnakeduel, kspaceduel, ksudoku, kubrick, lskat a umbrello byly portovány na KDE Frameworks 5.

Ladislav Hagara | Komentářů: 0
17.8. 15:11 | Nová verze

Simon Long představil na blogu Raspberry Pi novou verzi 2017-08-16 linuxové distribuce Raspbian určené především pro jednodeskové miniaturní počítače Raspberry Pi. Společně s Raspbianem byl aktualizován také instalační nástroj NOOBS (New Out Of the Box Software). Nejnovější Raspbian je založen na Debianu 9 Stretch. Přehled novinek v poznámkách k vydání. Řešena je také bezpečnostní chyba Broadpwn (CVE-2017-9417).

Ladislav Hagara | Komentářů: 2
Těžíte nějakou kryptoměnu?
 (4%)
 (2%)
 (17%)
 (76%)
Celkem 370 hlasů
 Komentářů: 21, poslední 13.8. 09:57
    Rozcestník

    Dotaz: jak limitovat prostredky pro pgsql

    10.2.2006 13:28 stradivarius
    jak limitovat prostredky pro pgsql
    Přečteno: 154×
    Zdravim, prave jsem polozil stroj pomoci funkce v plpgsql ktera pracovala pres 36000radku. Dosla pamet. Jak tomu rozumim, tak protoze takova funkce pracuje v transakci, tak se data asi ukladala do pameti tak dlouho, dokud nedosla. Funkce delala 2 LOOPy, jeden pres 36000 radku a druhy vnitrni pres 90radku a vykonavala INSERTy do nekolika ruznych tabulek. Rekl bych ze v dotazu chyba nebude a v transakci bych to rad ponechal.

    Chtel bych tedy nastavit limit pameti pro proces postmaster. Lze to? Nepotrebuji nastavit pamet pro vsechny procesy pres System V IPC. Diky

    Odpovědi

    12.2.2006 11:48 asd
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    man bash - hledat ulimit. nebo man 2 setrlimit. to je ale prilis systemove. To se potom mozna muze postgre odporoucet i takovym zpusobem, ze si poskodi databazi. Rek bych, ze je todle horsi nez kdyz je proces bud a) zabit z oom manazeraa nebo ceka na veky v situaci s povolenym overcommitem. Protoze takhle se mu nemisi povist neco alokovat a bude zalezet na programatorovi, jestli nezapomel na if a ukonci li se s nejakou chybovou hlaskou transakce nebo jestli pojede dal a zacnou se dit spatnosti.

    Doporucil bych se podivat do postgresu jestli neni nekde konfigurace obdobneho mazxima treba neco s result sety apod. nebo pridat 10GB swap.
    13.2.2006 10:31 stradivarius
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    Diky za odpoved,

    Ulimit je prima. Setrlimit je jeste lepsi. Ale myslel jsem na nejakou konfiguraci v postgresu, ktera by byla schopna zrusit query, pokud tato je moc zrava, ale postmaster by prezil. Treba
    SET transaction_memory_limit=500M;
    :-) Ale asi nic takoveho nebude, zvlaste kdyz se tranakce uklada v temp tabulkach.
    12.2.2006 13:05 barney
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    postgresql si vysledky transakcie neuklada v pamati, len si ich zapise do prislusnej tabulky s oznacenim transakcie, ktora ich vytvorila (a aj preto je nutny vacuum).

    skor by som povedal, ze v tej funkcii bude memory-leak.

    13.2.2006 10:22 stradivarius
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    Zdravim a diky za odpoved, Query ve funkci jsem si rozdelil do vicero funkci a potom ze skriptu volal vzdy po davkach o 10000 radcich. Probehlo to korektne a docela rychle. Slo o vlozeni dat ze starych tabulek do novych tabulek (jina struktura, data provazana cizimi klici).

    Po vlozeni ostatnich dat jsem chtel udelat query (viz nize ve funkci) najednou pro vsechna data, ale zacalo to swapovat jako predtim, takze to bude mozna tady tim. Opet jsem to musel rozkouskovat a volat po castech. Rad bych vam dal za pravdu a fci lepe napsal, ale pokud tam memory leak je tak ji bohuzel nevidim. Ta exception je tam proto ze vychozi data nejsou v nejkonzistentnejsim stavu...

    Mate pravdu s tou docasnou tabulkou pro transakci, to je rozhodne logictejsi.
    CREATE OR REPLACE FUNCTION icv_objects2(integer,integer)  RETURNS void AS $BODY$
    DECLARE
    	rec RECORD;
    BEGIN
    	FOR rec IN SELECT * FROM md_metadata_old WHERE id_metadata::integer BETWEEN $1 AND $2 LOOP
    		RAISE NOTICE 'Adding values for metadata %',rec.id_metadata;
    		IF rec.id_metadatagroup IS NOT NULL THEN
    				BEGIN
    					EXECUTE 'INSERT INTO md_metadata(fileidentifier,parentidentifier,identificationinfo) VALUES('||rec.id_metadata::integer||', '||rec.id_metadatagroup::integer||', '||rec.id_metadata::integer||')';
    				EXCEPTION WHEN foreign_key_violation THEN
    					EXECUTE 'INSERT INTO md_metadata(fileidentifier,parentidentifier,identificationinfo) VALUES('||rec.id_metadata::integer||', '||rec.id_metadata::integer||', '||rec.id_metadata::integer||')';
    				END;
    		END IF;		
    	END LOOP;
    END;
    $BODY$
    
    PostgreSQL 8.1.0
    13.2.2006 12:12 barney
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    aha :-))

    ak ma pamat neklame, problem je ten, ze select taha vsetky data do pamate. vyskusajte implementovat nasledovny pseudokod (bohuzival plpgsql neovladam/nepouzivam) :

    
    "declare cursor nejake_meno for select * from md_metadata_old;"
    while row = "fetch from nejake_meno"
      insert into ...
    end
    
    
    13.2.2006 16:43 stradivarius
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    Bingo! A ja si rikal na co ty asi kurzory jsou. Ale dokumentace me lehce mate, pry smycky FOR maji interni kurzor. Zda se mi ze interni kurzory asi funguji jinak, protoze tato funkce tentokrat trvala pouze kolem 30s(puvodni nedavkovana by mozna ani nedobehla). Ale je pravda, ze tabulka nemela cizi klice, takze se nekontrolovaly zavislosti.

    Zde vysledek:
    CREATE OR REPLACE FUNCTION icv_objects3()
      RETURNS void AS
    $BODY$
    DECLARE
    	row md_metadata_old%ROWTYPE;
    	curs REFCURSOR;
    BEGIN
    	OPEn curs FOR SELECT * FROM md_metadata_old;
    	FETCH curs INTO row;
    	WHILE FOUND LOOP
    		RAISE NOTICE 'Adding values for metadata %',row.id_metadata;
    		IF row.id_metadatagroup IS NOT NULL THEN
    			BEGIN
    				EXECUTE 'INSERT INTO md_metadata_test(fileidentifier,parentidentifier,identificationinfo) VALUES('||row.id_metadata::integer||', '||row.id_metadatagroup::integer||', '||row.id_metadata::integer||')';
    			EXCEPTION WHEN foreign_key_violation THEN
    			END;
    		END IF;	
    		FETCH curs INTO row;	
    	END LOOP;
    	CLOSE curs;
    END;
    $BODY$
      LANGUAGE 'plpgsql' VOLATILE;
    
    http://www.postgresql.org/docs/8.1/interactive/plpgsql-cursors.html#PLPGSQL-CURSOR-DECLARATIONS

    To by bylo, dekuji barney! Nicmene, zpet k puvodni otazce, nemohu nejak omezit prostredky pro jednotlive query? Pokud takovou fci nekdo spusti treba na sdilenem hostingu? Asi kazdy namitne ze tam potom nema co pohledavat, nicmene vypadek hrozi, nebo dokonce nekonzistence dat, pokud by postmaster mel omezeni v OS.
    13.2.2006 16:54 barney
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    rád som pomohol (i sa niečo priučil)
    s obmedzeniami vám bohužial neviem poradiť.
    15.2.2006 11:01 stradivarius
    Rozbalit Rozbalit vše Re: jak limitovat prostredky pro pgsql
    Takze asi takove nativni nastaveni omezeni zdroju na query neexistuje, skoda. Bylo by to docela uzitecne. Ted lze videt probihajici query pokud vim maximalne pres pg_stat_activity, takze by sel mozna udelat nejaky skriptik, ktery by podle loadu killoval query, ktera bezi nejdele casu. Neni to nejsystemovejsi, ale zase by to mohlo posilat mailem upozorneni a jine veci.

    Mam nejisty pocit, ze nejake rizeni zdroju jsem nedavno videl v prezentaci http://www.enterprisedb.com, ale ted to na tech strankach nejak nemuzu najit. Mimochodem, pouzivate nekdo tu enterprisedb?

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.