abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 13:00 | Komunita

Při prvním spuštění Ubuntu 18.04 LTS (Bionic Beaver) je spuštěn nástroj Ubuntu Report. Pokud uživatel souhlasí, jsou pomocí tohoto nástroje odeslány do Canonicalu informace o daném počítači (doba instalace, počet procesorů, rozlišení displeje, velikost paměti, časová zóna, ...). V červnu byly zveřejněny první statistiky. Podrobnější statistiky jsou nově k dispozici na samostatné stránce.

Ladislav Hagara | Komentářů: 0
dnes 01:00 | Pozvánky

O víkendu probíhá v Košicích pravidelné setkání příznivců otevřených technologií OSS Víkend. Na programu je řada zajímavých přednášek a workshopů.

Ladislav Hagara | Komentářů: 0
dnes 00:11 | Nová verze

Byla vydána nová verze 1.3 otevřeného, licenčními poplatky nezatíženého, univerzálního ztrátového formátu komprese zvuku Opus (Wikipedie) a jeho referenční implementace libopus. Vylepšena byla například detekce, zda se jedná o řeč nebo o hudbu. Přidána byla podpora prostorového zvuku (immersive audio) dle plánovaného RFC 8486. Podrobnosti a zvukové ukázky na demo stránce.

Ladislav Hagara | Komentářů: 0
včera 22:33 | Nová verze

Bylo vydáno Ubuntu 18.10 s kódovým názvem Cosmic Cuttlefish (Kosmická sépie). Ke stažení jsou Ubuntu Desktop a Server, Ubuntu Cloud Images, Ubuntu Netboot, Kubuntu, Lubuntu a Lubuntu Alternate, Ubuntu Budgie, Ubuntu Kylin, Ubuntu MATE, Ubuntu Studio a Xubuntu. Podrobnosti v poznámkách k vydání.

Ladislav Hagara | Komentářů: 2
včera 18:33 | Nová verze

Byl vydán PostgreSQL ve verzi 11.0. Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
včera 17:33 | IT novinky

Nadace Raspberry Pi představila na svém blogu Raspberry Pi TV HAT, tj. rozšíření jednodeskového počítače Raspberry Pi umožňující příjem televizního vysílání DVB-T a DVB-T2. Cena rozšíření je 21,50 $.

Ladislav Hagara | Komentářů: 2
včera 17:07 | Nová verze

Vychází OpenBSD 6.4. Z řady novinek namátkou: podpora dalších architektur (arm64 např. dostal z Linuxu vypůjčený ovladač radeondrm), hypervizor vmm podporuje i qcow2 disky a šablony, jádro dokáže automaticky přepínat mezi dostupnými bezdrátovými sítěmi, sítě pracují o něco efektivněji, z bezpečnosti „přísaha byla doplněna odhalením“ (pledge(2) lze vhodně doplnit pomocí unveil(2)), SMT je ve výchozím stavu vypnutý, ale lze jej zapnout. Syntaxe nastaveni OpenSMTPD se změnila. S vydáním vychází také nová verze LibreSSL - 2.8.2.

Daniel Čižinský | Komentářů: 4
17.10. 23:15 | IT novinky

Firma Raptor Computing Systems, která stojí také za pracovní stanicí Talos II, představila levnější desku Blackbird s podporou jednoho 4-/8jádrového CPU POWER9 Sforza a formátem microATX; bližší specifikace jsou ve wiki výrobce.

Fluttershy, yay! | Komentářů: 20
17.10. 22:11 | Zajímavý projekt

Byla vydána verze 1.0 svobodné federalizované platformy pro sledování a sdílení videí, alternativy YouTube s podporou P2P, PeerTube (Wikipedie). Za vývojem PeerTube stojí nezisková organizace Framasoft snažící se mimo jiné nahradit svými svobodnými Frama službami služby společnosti Google (De-google-ify Internet).

Ladislav Hagara | Komentářů: 0
17.10. 19:44 | Zajímavý projekt

Společnost System76 prodávající počítače s Pop!_OS nebo Ubuntu plánuje prodej vlastního open source počítače s názvem Thelio. Informací je poskrovnu. Na Twitteru byla představena open source rozšířující deska (daughterboard), která by měla převzít funkce proprietárního softwaru na základní desce (motherboard).

Ladislav Hagara | Komentářů: 2
Přispíváte osobně k vývoji svobodného softwaru?
 (40%)
 (43%)
 (24%)
 (23%)
 (11%)
 (37%)
Celkem 244 hlasů
 Komentářů: 12, poslední 17.10. 21:18
Rozcestník

Dotaz: Smazání velkého monžství dat z Oracle DB

2.10.2016 13:19 majales | skóre: 23 | blog: Majales
Smazání velkého monžství dat z Oracle DB
Přečteno: 2024×
Zdravím,
Provozujeme velkou Oracle DB a nahromadily se nám tam od uživatelů desítky GB, možná i stovky GB irelevantních dat. Rád bych zredukoval DB tak aby se zmenšila pravidelná měsíční záloha, která už přesahuje rozumnou velikost. Někde jsem se dočetl, že se masivní delete operace v Oracle DB provádějí s NOLOGGING. Poradili byste jak postupovat v případě výmazu ne celých řádků, ale pouze blobů, kde jsou data uložena? Jedná se o Oracle 10g v archivelog módu. Díky za každý tip.

Odpovědi

2.10.2016 13:27 majales | skóre: 23 | blog: Majales
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Kolega bez mého vědomí sám část dat v blobech přepsal daty s nulovou velikostí, což se samosebou na velikosti fullbackupu neprojeví. Předpokládám, že tyto operace by se měly nejprve rollbacknout a pak smazat s NOLOGGING option. Je to tak?
Max avatar 2.10.2016 14:26 Max | skóre: 66 | blog: Max_Devaine
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Mně by zajímalo, k čemu máte archivní logy? To děláte vždy dump databáze a pak zálohujete redo logy, abyste se mohli vrátit do jakéhokoli času, a tak stále dokola?
Jinak já teď řeším něco podobného. Mám asi 4TiB db, celé je to closed řešení od jedné firmy a nyní mi řekli, že jedna z tabulek má 2TiB, že jsou tam jen logy aplikáče, že to můžeme klidně mazat, proč to prý neděláme. Mno, to byla od nich další třešnička, protože podobných skrytých blbostí, o kterých nám neřekli, bylo celkem dost a některé si vyžádaly i neplánované odstávky.
Osobně dělám dump jednou týdně a zálohu redo logů. Ale nakonec budu přecházet na standby řešení tak, jako to máme i u jiných db, jelikož server se z "nice to have" přesunul do čáry "když to chvilku nepoběží, tak bude průser".
Zdar Max
Měl jsem sen ... :(
2.10.2016 15:37 majales | skóre: 23 | blog: Majales
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Vychází to z původní instalace, která byla rozlezlá na celkem 8 fyzických mašin, z toho byly 4 fyzické stroje určeny pro oracle. Byly to dva Oracle RAC clustery s tím že ten druhý byl Standby toho prvního. Na zálohu tam byla pásková knihovna. Celé se to zredukovalo na dvě virtuání mašiny, jedna pro Oracle DB a druhá pro Oracle HTTP s tím, že výhledově bych rád zprovoznil alespoň Standby DB na virtuálu na jiné fyzickém mašině. Původní zálohovací skripty jsem neměnil, takže zůstal každodenní skript na backup archivelogů a týdenní na increment a měsíční na FULL backup. Dostal jsem se k tomu asi rok a něco před přechodem z původní instalace na ten virtuál s minimálními znalostmi co se týče oracle, takže teď řeším ex post jak se s tím popasovat..
3.10.2016 10:26 jekub
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
dump jednou týdně a zálohu redo logů

Není to zbytečné?
2.10.2016 16:53 Tomáš
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB

Zrovna jsem toto asi před 1 měsícem řešil. Je potřeba si uvědomit, že jedno veliké mazání DELETE FROM ... , které by bylo jako jedna veliká transakce, může zhavarovat na nedostatku místa v undo segmentu (dokud neuděláte commit, tak stále musíte mít někde zálohu pro případ rollback).

Dále je potřeba si uvědomit, že smazané místo zůstává zabrané v segmentu do okamžiku, dokud neuděláte alter table shrink space cascade nebo alter table modify lob ... pro LOB. Netuším jak to vypadá při zálohování, zda se zálohují i prázdné ale zabrané bloky. V případě LOBu pak záleží i na tom, kam se LOBy sypou zda přímo do řádku, nebo LOB segmentu (viz fráze enable storage in row při vytváření tabulky)

Já jsem skončil u mazání po časových úsecích v nočním okně. Už to běží 14 dní a ještě dalších 14 dní poběží. Každou noc se zvládnou odmazat tak 2-3 časové úseky.

Pak bude následovat zmíněné alter table modify lob (mylob) store as secure file compress high které jednak sesype ementál tabulky a LOB segmentu do kompaktní formy, a jednak dojde ke kompresi dat LOBu. Přesný příkaz bude pro sesypání tabulky/LOBu do kompaktnější formy závisí na tom zda se Váš LOB umísťuje převážně do řádku nebo do separátního LOB segementu. Kam LOBY převážně tečou zjistíte pokud se podíváte na velikost LOB segmentu. Z této části mám největší obavu, protože tabulka bude po celou dobu sesypání exklusivně zamknutá a já jen doufám, že se vejdu s časem běhu do víkendového okna.

3.10.2016 10:55 Ivan2 | skóre: 4
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Obavam se, ze na to co delas "alter table modify lob (mylob) store as secure file compress high" je potreba extra linece na "Advanced compression". :(
3.10.2016 10:53 Ivan2 | skóre: 4
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
na NOLOGGING moc nespolehej, ten se uplatni pouze za urcitych pripadech a tech podminek je docela dost.

Pokud si muzes dovolit downtime tak pouzij CTAS, "create table as select" s naslednym rename, a drop table.

shrink lob na 10g verzi bych moc nedoporucoval.
27.10.2016 09:51 majales | skóre: 23 | blog: Majales
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Zdravím.. A kdybych si mohl dovolit downtime, tak jak by to šlo udělat?
27.10.2016 14:15 krocan
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
...tak pouzij CTAS, "create table as select" s naslednym rename, a drop table.
16.11.2016 09:17 alkoholik | skóre: 36 | blog: Alkoholik
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Jasne, ser se s tim rucne, kdyz ti Oracle pripravil nastroj.
16.11.2016 09:18 alkoholik | skóre: 36 | blog: Alkoholik
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Sorry, 10g
3.10.2016 11:04 jekub
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
takhle narychlo, pokud blob tvoří vetšinu dat tabulky
create table as select (bez blobu) nolog
alter table add blob
alter table nolog
recyclebin=off
drop table
rename table
alter table log
nebo podobné variace na toto téma.
3.10.2016 13:35 majales | skóre: 23 | blog: Majales
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
No musím to promyslet... to mazání má být opravdu selektivní, tzn. identifikují se bloby s "bordelem" a přepíší se nulovou velikostí...
3.10.2016 14:25 jekub
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Tak jeste jede tip
add column
update
drop column
rename column
30.10.2016 21:24 FrantaS | skóre: 12 | Hlučín
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Je to již mnoho let a verzí Oracle zpět, ale podobnou věc jsem vyřešil tak, že jsem mazal v kurzoru. Tam jsem zadával podmínky. Pokud jde nějak identifikovat postupně řádky třeba za určité dny apod, pak je lze s dalšími podmínkami updatovat v cyklu a nakonec cyklu dát commit. Takto lze podle velikosti rollbacku v jednom cyklu updatovat třeba 100.000 záznamů. Výmaz 2 mil. záznamů mi neprošel, protože se to nevešlo do rollbacku, ale takto to šlo velmi rychle.
Ať se nám daří.
7.11.2016 14:36 rich
Rozbalit Rozbalit vše Re: Smazání velkého monžství dat z Oracle DB
Jednou z moznosti by mohlo byt dotycnou tabulku rozdelit na partitions (viz. table online redefinition. jinak teda partitioning vyzaduje licenci), kde klicem pro partitioning by byl nejaky casovy sloupec (interval partitioning). Smazani starych udaju je pak jen drop/exchange partition...

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.