abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 15:22 | Nová verze

    Byla vydána nová verze 18 integrovaného vývojového prostředí (IDE) Qt Creator. S podporou Development Containers. Podrobný přehled novinek v changelogu.

    Ladislav Hagara | Komentářů: 0
    dnes 12:55 | Nová verze

    Cursor (Wikipedie) od společnosti Anysphere byl vydán ve verzi 2.0. Jedná se o multiplatformní proprietární editor kódů s podporou AI (vibe coding).

    Ladislav Hagara | Komentářů: 1
    dnes 02:55 | Nová verze

    Google Chrome 142 byl prohlášen za stabilní. Nejnovější stabilní verze 142.0.7444.59 přináší řadu novinek z hlediska uživatelů i vývojářů. Podrobný přehled v poznámkách k vydání. Opraveno bylo 20 bezpečnostních chyb. Za nejvážnější z nich bylo vyplaceno 50 000 dolarů. Vylepšeny byly také nástroje pro vývojáře.

    Ladislav Hagara | Komentářů: 0
    dnes 01:22 | IT novinky Ladislav Hagara | Komentářů: 0
    včera 17:00 | Upozornění

    Národní identitní autorita, tedy NIA ID, MeG a eOP jsou nedostupné. Na nápravě se pracuje [𝕏].

    Ladislav Hagara | Komentářů: 8
    včera 16:44 | IT novinky

    Americký výrobce čipů Nvidia se stal první firmou na světě, jejíž tržní hodnota dosáhla pěti bilionů USD (104,5 bilionu Kč). Nvidia stojí v čele světového trhu s čipy pro umělou inteligenci (AI) a výrazně těží z prudkého růstu zájmu o tuto technologii. Nvidia již byla první firmou, která překonala hranici čtyř bilionů USD, a to letos v červenci.

    Ladislav Hagara | Komentářů: 6
    včera 14:11 | Komunita

    Po Canonicalu a SUSE oznámil také Red Hat, že bude podporovat a distribuovat toolkit NVIDIA CUDA (Wikipedie).

    Ladislav Hagara | Komentářů: 2
    včera 13:55 | Nová verze

    TrueNAS (Wikipedie), tj. open source storage platforma postavená na Linuxu, byl vydán ve verzi 25.10 Goldeye. Přináší NVMe over Fabric (NVMe-oF) nebo OpenZFS 2.3.4.

    Ladislav Hagara | Komentářů: 0
    včera 13:33 | Nová verze

    Byla vydána OpenIndiana 2025.10. Unixový operační systém OpenIndiana (Wikipedie) vychází z OpenSolarisu (Wikipedie).

    Ladislav Hagara | Komentářů: 0
    včera 13:22 | Zajímavý článek

    České základní a střední školy čelí alarmujícímu stavu kybernetické bezpečnosti. Až 89 % identifikovaných zranitelností v IT infrastruktuře vzdělávacích institucí dosahuje kritické úrovně, což znamená, že útočníci mohou vzdáleně převzít kontrolu nad klíčovými systémy. Školy navíc často provozují zastaralé technologie, i roky nechávají zařízení bez potřebných aktualizací softwaru a používají k nim pouze výchozí, všeobecně známá

    … více »
    Ladislav Hagara | Komentářů: 16
    Jaké řešení používáte k vývoji / práci?
     (36%)
     (48%)
     (19%)
     (19%)
     (22%)
     (17%)
     (21%)
     (16%)
     (17%)
    Celkem 285 hlasů
     Komentářů: 14, poslední 14.10. 09:04
    Rozcestník

    Dotaz: Vlastní repo cache?

    1.11.2016 13:38 MilanC | skóre: 16
    Vlastní repo cache?
    Přečteno: 609×
    Ahoj,

    předem napíšu co je cílem a jaká je představa. Mám řekněme 30 strojů s Ubuntu16 a cílem je na všech udržet jednotné prostředí co se týká instalovaných balíčků. Když je budu aktualizovat z netu, jednak se verze mohou v čase lišit a také si nemohu dovolit příliš riskovat update všech strojů najednou / kdyby se něco rozjelo.

    To je představa, ale dál úplně přesně nevím, jak toho docílit. Všechny servery by mohli odkazovat na můj vlastní repo, kde budu mít jen "katalog" (?), který pak obsahuje odkazy na konkrétní balíčky na oficiální repo. Tento katalog by bylo možné aktualizovat jen ručně. Po jeho aktualizaci bych třeba na 2 strojích urelal ručně apt update/upgrade a nějaký čas testoval. Pokud by bylo vše ok, udělal bych hromadně totéž na všech ostatních. Za nějakou dobu bych ručně z netu aktualizoval "katalog" a celou proceduru opakoval. Takto nějak by to asi mohlo fungovat?

    Našel jsem několik vodítek, jako reprepro, apt-cacher, dpkg... Ale úplně nevím, který z nástrojů nejblíže odpovídá. Také je to možná vymyšleno špatně. Nechci nějaké extra nástroje typu puppet, raději něco jednoduchého a rychle zprovoznitelného, počítám s ruční interakcí.

    Díky za nasměrování.

    Odpovědi

    1.11.2016 13:56 NN
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Co jit naprikad cestou Ansible? Nebo jinou variantou software pro hromadnou spravu?
    pavlix avatar 2.11.2016 16:13 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Jak přesně cestou ansible vyřeší tu cache?
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    1.11.2016 14:18 Sten
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Pokud mají mít všechny stejnou verzi, pak by nejblíže bylo mít server, kam ručně synchronizujete package list (Packages.gz) a stahované balíčky budete cachovat třeba pomocí apt-cacheru. Ještě jednodušší by bylo rozjet plnohodnotný mirror (který aktualizujete, jen když uznáte za vhodné), ale to bude potřebovat okolo terabajtu místa.

    Anebo pokud to budete dělat ručně, tak můžete z testovacího stroje exportovat seznam balíčků a jejich verzí a nainstalovat to na ostatních.
    2.11.2016 10:24 MilanC | skóre: 16
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Ahoj, já mám trochu problém s tím pochopením (15 let FreeBSD a nezkušenost s Linuxem). Třeba nevím, kde najdu na ubuntu nainstalované balíčky.

    Ale jinak. Mám mezi těmi 30 stroji NFS link na jeden společný. Tak předpokládám, že bych to mohl využít místo tahání z web serveru ok? Ten Packages.gz mohl mít ve sdíleném share adresáři (NFS). Na každém stroji bych měl nastavit v /etc/apt/sources.list - deb file:/var/NFS/myrepo ./ (nic víc) Přičemž jestli chápu, Packages.gz má být dostupný také ve /var/NFS/myrepo/

    Teď mam problém s tím, jak vytvářet Packages.gz. Předpokládám, že dpkg-scanpackages . /dev/null | gzip -9c > Packages.gz

    musím pustit někde v adresáři s nainstalovanými balíčky, což je na Ubuntu kde? /var/cache/apt/archives/? Tady mám ale jen 96 deb souborů. V systému mám ale aktuálně balíčků.

    s# dpkg -l | wc -l 835

    Díky za pomoc.
    2.11.2016 13:34 Sten
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Nainstalované balíčky jsou rozbalené a nainstalované. Před rozbalením se stahují do /var/cache/apt/archives/, ale to je jenom cache. Ve /var/lib/apt jsou metadata ohledně nainstalovaných balíčků (jména, verze, instalační skripty). Samotné balíčky se nikde neskladují.

    Můj návrh byl spíš stáhnout Packages.gz z oficiálního repozitáře. Dokud Packages.gz neaktualizujete, tak se nezmění verze, které tam jsou uvedeny. Tím budete mít stejné verze na všech počítačích. Při aktualizaci pak aktualizujete Packages.gz a na všech strojích spustíte aptitude update, tím se všechny aktualizují na stejné novější verze.
    2.11.2016 15:25 MilanC | skóre: 16
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Aha, ale já nikde v systému Packages.gz nemám. Nepoužívám aptitude ale apt, jestli to není tím. Nicméně mezitím jsem si rozjel apt-mirror, protože nastavení a použití mi přišlo asi nejsnadnější. Ale krom jiného mám problém, že miroruji také z neofic. repo (nvidia) a nevím jak vyřešit problém s podpisem.

    Jinak jsem musel v sources.list na "klientovi" vydefinovat každé repo. Myslel jsem, že to půjde nějak najednou (?). Alespoň v některých příkladech jsem to viděl.

    v sources mam např. deb file:/var/share/apt-mirror/mirror/ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial main

    apt-update
    W: GPG error: file:/var/share/apt-mirror/mirror/ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial InRelease: The following signatures couldn't be verified because the public key is not available: NO_PUBKEY FCAE110B1118213C
    E: The repository 'file:/var/share/apt-mirror/mirror/ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial InRelease' is not signed.
    N: Updating from such a repository can't be done securely, and is therefore disabled by default.
    N: See apt-secure(8) manpage for repository creation and user configuration details.
    
    sources.list / klient
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial main restricted
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial-updates main restricted
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial universe
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial multiverse
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial-updates multiverse
    deb file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu xenial-backports main restricted universe multiverse
    deb file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu xenial-security main restricted
    deb file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu xenial-security universe
    deb file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu xenial-security multiverse
    deb file:/var/share/apt-mirror/mirror/ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial main
    
    mirror.list / server
    ################## config ##################
    set base_path           /var/share/apt-mirror
    #set mirror_path        $base_path/mirror
    #set skel_path          $base_path/skel
    #set var_path           $base_path/var
    #set cleanscript        $var_path/clean.sh
    set defaultarch         i386 amd64
    #set postmirror_script  $var_path/postmirror.sh
    #set run_postmirror     0
    set nthreads            20
    set _tilde              0
    ################## end config ##################
    
    deb http://cz.archive.ubuntu.com/ubuntu xenial main restricted
    deb http://cz.archive.ubuntu.com/ubuntu xenial-updates main restricted
    deb http://cz.archive.ubuntu.com/ubuntu xenial universe
    deb http://cz.archive.ubuntu.com/ubuntu xenial-updates universe
    deb http://cz.archive.ubuntu.com/ubuntu xenial multiverse
    deb http://cz.archive.ubuntu.com/ubuntu xenial-updates multiverse
    deb http://cz.archive.ubuntu.com/ubuntu xenial-backports main restricted universe multiverse
    deb http://security.ubuntu.com/ubuntu xenial-security main restricted
    deb http://security.ubuntu.com/ubuntu xenial-security universe
    
    deb http://ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial main
    # deb-src http://ppa.launchpad.net/graphics-drivers/ppa/ubuntu xenial mai
    
    clean http://archive.ubuntu.com/ubuntu
    
    k3dAR avatar 2.11.2016 18:03 k3dAR | skóre: 63
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Packages.gz je ulozene na adrese repositare, pri aktualizaci seznamu z repositaru(apt update) se stahne a rozbali do /var/apt/list s nazvem neco jako repourl_distro_release_section_type_arch_Packages...
    porad nemam telo, ale uz mam hlavu... nobody
    k3dAR avatar 2.11.2016 18:03 k3dAR | skóre: 63
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    btw: apt nebo aptitude je jedno
    porad nemam telo, ale uz mam hlavu... nobody
    3.11.2016 15:20 Jindřich Makovička | skóre: 17
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Doporučoval bych začít man debmirror. Pokud nepotřebujete všechny architektury a stačí i386 + x86-64, mělo by na zrcadlo stačit pár desítek GB místa.
    k3dAR avatar 3.11.2016 23:04 k3dAR | skóre: 63
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    doporucil bych venovat pozornost komu na co odpovidas ;)
    porad nemam telo, ale uz mam hlavu... nobody
    4.11.2016 09:45 MilanC | skóre: 16
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    A jaký je rozdíl třeba mezi debmirror a apt-mirror? apt-mirror mi teď zabírá i386 a amd64 asi 150GB. Nevím proč, ale háže mi pak klient nějaké chyby že něco nemůže najít. Když pouštím apt-mirror tak bez chyb.

    File not found - /var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu/dists/xenial-security/main/binary-i386/Packages (2: No such file or directory) Get:16 file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu xenial-security/universe i386 Packages [282 kB] Ign:16 file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu xenial-security/universe i386 Packages Reading package lists... Done E: Failed to fetch file:/var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu/dists/xenial-updates/main/binary-i386/Packages File not found - /var/share/apt-mirror/mirror/cz.archive.ubuntu.com/ubuntu/dists/xenial-updates/main/binary-i386/Packages (2: No such file or directory) E: Failed to fetch file:/var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu/dists/xenial-security/main/binary-i386/Packages File not found - /var/share/apt-mirror/mirror/security.ubuntu.com/ubuntu/dists/xenial-security/main/binary-i386/Packages (2: No such file or directory) E: Some index files failed to download. They have been ignored, or old ones used instead.
    2.11.2016 18:19 lertimir | skóre: 64 | blog: Par_slov
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Tak pro opensuse jsem dělal synchronizaci a update podle How to cache openSUSE repositories with Squid asi by nemělo být težké upravit použití pro Ubuntu. primární výhoda pro mne byla snížení zátěže na síti, repozitory se stahovalo jednou. a pro Ubuntu existuje přímo Apt-Cacher-Server. A moje zkušenost je, že když se něco rozjelo a to bylo velmi výjmečné, tak náprava byla vetšinou velmi rychle, spíše v řádu hodin. Samozřejmě neznám politiku ubuntu.
    pavlix avatar 2.11.2016 22:36 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Kdysi jsem na tenhle účel squid používal, ale nějak mi to řešení nesedělo. Mam pocit, že jsem měl problém s tím, že to bylo jen pro pár strojů a ten squid neměl nejmenší tušení, co bude ještě potřeba a co ne. Ale univerzální řešení mě jinak nenapadá a u desítek strojů by to mohlo aspoň trochu fungovat.
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    3.11.2016 23:23 Sten
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Squid je vhodný jen jako transparentní proxy, která to přesměruje na apt-cacher-ng nebo něco podobného. On sám právě nedokáže poznat, kdy už může balíčky smazat či je má ještě ponechat. apt-cacher-ng a podobní sledují Packages.gz a tak ví, kdy už určité balíčky nejsou odkazované a mohou je odstranit.
    pavlix avatar 4.11.2016 00:07 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    To mi přijde jako nehorázná prasárna. Asi si umím představit situaci, kdy bych transparentní proxy nějak překousl a možná i pro ty balíčky, ale podle mě si tím člověk zadělává na těžko odhalitelné problémy.
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    2.11.2016 19:26 PanZvedavy
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    https://www.aptly.info/
    Josef Kufner avatar 4.11.2016 11:44 Josef Kufner | skóre: 70
    Rozbalit Rozbalit vše Re: Vlastní repo cache?
    Šel bych na to jinak. Namísto aktualizování jednotlivých počítačů bych je nechal používat centrálně spravovaný image systému. Při aktualizaci by se udělal nový image a počítače by rebootnuli do nového. Pokud by byl problém, rebootnuli by si zpět do starého. Dalo by se zde s výhodou používat btrfs snapshotů nebo podobného mechanismu.

    Tím "image" nemyslím přímo obraz disku, ale jen adresářovou strukturu, kterou lze připojit po NFS nebo pomocí rsync přenést. V případě použití rsyncu bych asi šel cestou dvou systémových partition, kdy jedna by se používala a na druhou šla nová verze, pak by se jen v grubu přehodila výchozí. Pokud by nevadila chvilka offline při aktualizaci, tak bych udělal na každém stroji miniaturní systém s ssh a rsyncem, který by byl schopen provést aktualizaci hlavního systému (rsync z vybraného vzoru) a rebootnout do nového systému.
    Hello world ! Segmentation fault (core dumped)

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.