abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 09:00 | Nová verze

    Byla vydána nová verze 4.19 svobodné náhrady proprietárních BIOSů a UEFI coreboot (Wikipedie). Na seznamu podporovaných desek přibylo 16 desek. Odstraněno bylo 30 desek.

    Ladislav Hagara | Komentářů: 0
    včera 23:00 | Komunita

    Do 23. ledna bylo možné připomínkovat Akt o kybernetické odolnosti – nová pravidla kybernetické bezpečnosti pro digitální produkty a podpůrné služby, novou iniciativu Evropské komise. Na možná nebezpečí pro open source upozornila Open Source Initiative nebo Eclipse Foundation.

    Ladislav Hagara | Komentářů: 5
    včera 20:00 | Nová verze

    Vyšla nová verze 10.7 desktopového prostředí Budgie. Zatím stále vychází z GNOME, ale nově používá např. vlastní backend nabídky a spouštěče aplikací. Vůbec přepracovaná nabídka také nyní podporuje přepínání hybridních GPU nebo možnost nastavení osobní uživatelské nabídky,…

    Fluttershy, yay! | Komentářů: 5
    27.1. 13:11 | Bezpečnostní upozornění

    Závažná zranitelnost ohrožuje více než 100 modelů tiskáren Lexmark (pdf). Společnost Lexmark vydala bezpečnostní záplatu firmwaru. Opravovaná zranitelnost může vést ke vzdálenému spuštění libovolného kódu (CVSSv3 9.0).

    Ladislav Hagara | Komentářů: 15
    27.1. 08:00 | Nová verze

    Byla vydána nová major verze 2.0.0 toolkitu SQLAlchemy (Wikipedie) přinášejícího do programovacího jazyka Python podporu SQL (Structured Query Language) a ORM (Object–relational mapping). Detaily v přehledu novinek a v průvodci migrací.

    Ladislav Hagara | Komentářů: 0
    27.1. 00:11 | Nová verze

    Byla vydána verze 1.67.0 programovacího jazyka Rust (Wikipedie). Podrobnosti v poznámkách k vydání. Vyzkoušet Rust lze například na stránce Rust by Example.

    Ladislav Hagara | Komentářů: 0
    26.1. 20:11 | Nová verze

    Byla vydána nová verze 23.1 open source firewallové a routovací platformy OPNsense (Wikipedie). Jedná se o fork pfSense od této verze postavený na FreeBSD místo HardenedBSD. Kódový název OPNsense 23.1 je Quintessential Quail. Přehled novinek v příspěvku na blogu.

    Ladislav Hagara | Komentářů: 0
    26.1. 13:22 | IT novinky

    Sdružení CZ.NIC, správce české národní domény, zveřejnilo Domain Report 2022, ve kterém upozorňuje na zajímavá data spojená s doménou .CZ. Na konci roku 2022 bylo evidováno celkem 1 463 116 domén. Průměrně bylo měsíčně zaregistrováno 17 193 domén, přičemž nejvíce registrací proběhlo v listopadu (23 581) a nejméně pak v červenci (13 199). Na rozdíl od předchozích let byl poprvé v historii zaznamenán propad v počtu domén zabezpečených

    … více »
    Ladislav Hagara | Komentářů: 5
    26.1. 09:00 | Zajímavý software

    Infisical je open source nástroj s end-to-end šifrováním pro snadnou správu a synchronizaci proměnných prostředí (.env souborů) napříč vývojovým týmem, zařízeními a infrastrukturou. Zdrojové kódy jsou k dispozici na GitHubu.

    Ladislav Hagara | Komentářů: 2
    26.1. 08:00 | Nová verze

    Interaktivní rozšiřovatelný editor pro práci se strukturovanými binárním daty GNU poke byl vydán v nové major verzi 3.0. Přehled novinek v poznámkách k vydání.

    Ladislav Hagara | Komentářů: 0
    Výdaje na elektřinu mi meziročně
     (70%)
     (20%)
     (8%)
     (1%)
     (2%)
    Celkem 382 hlasů
     Komentářů: 5, poslední 18.1. 12:48
    Rozcestník

    Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    11.6.2018 23:25 | Přečteno: 3708× | linux | poslední úprava: 12.6.2018 07:52

    Narazil jsem na jednu pěknou chuťovku, tak z toho udělám kvízek :)

    Úkol byl jasný, naladit 2x OEL7 (aka CentOS 7), aby outsourcovaná firma mohla naladit Oracle RAC přes NFS. Oba os jsem předal čistý, up to date, vše přednastaveno atd. Týpek si nastavil mounpointy na 4x nfs volume (storage server je NetApp), naladit Oracle RAC podle dosavadních zkušeností apod. Následně byl server předán zpět k testování, abychom si na něm vyzkoušeli všechno možné včetně všech zakoupených options apod.


    NFS se náhodně po startu nepřipojuje

    Všiml jsem si, že jeden node má problémy s automatickým mountem NFS volume z NetApp storage po startu OS. Chování bylo zcela náhodné. Jednou se nepřipojila jedna volume, podruhé dvě jiné atd. První node tímto problémem netrpěl. Dostupné info :

    # /etc/fstab
    192.168.1.1:/vol_ssd_rac_sdb_oradata /u02/oradata  nfs4  rw,bg,hard,nointr,rsize=32768,wsize=32768,tcp,vers=4.1,timeo=600,acregmin=0,acregmax=0,acdirmin=0,actimeo=0  0 0
    192.168.1.1:/vol_ssd_rac_sdb_redo /u02/oraredo  nfs4  rw,bg,hard,nointr,rsize=32768,wsize=32768,tcp,vers=4.1,timeo=600,acregmin=0,acregmax=0,acdirmin=0,actimeo=0  0 0
    192.168.1.1:/vol_ssd_rac_sdb_ocr /u02/oraocr nfs4  rw,bg,hard,nointr,rsize=32768,wsize=32768,tcp,vers=4.1,timeo=600,acregmin=0,acregmax=0,acdirmin=0,actimeo=0  0 0
    192.168.1.1:/vol_ssd_rac_sdb_gimr /u02/oragimr nfs4  rw,bg,hard,nointr,rsize=32768,wsize=32768,tcp,vers=4.1,timeo=600,acregmin=0,acregmax=0,acdirmin=0,actimeo=0  0 0
    
    # systemctl log :
    May 16 12:24:21 rac2-ph systemd[1]: Found ordering cycle on nfs-server.service/start
    May 16 12:24:21 rac2-ph systemd[1]: Found dependency on u02-oraredo.mount/start
    May 16 12:24:21 rac2-ph systemd[1]: Found dependency on nfs-server.service/start
    May 16 12:24:21 rac2-ph systemd[1]: Breaking ordering cycle by deleting job u02-oraredo.mount/start
    

    Tak tipujte, kde byla chybka. Pokud na to někdo během dne, dvou nepřijde, tak postnu řešení. Nicméně věřím, že zdejší chytré kedlubny na to kápnou rychle (i když stejný problém řešil týpek na CentOS foru a tam to skončilo neuzavřeně, link tady, komentář s řešením mi nebyl schválen, tak ať si trhnou).
    Zdar Max

    UPDATE : A výhercem je Michal Kubeček a řešení v komentáři #20        

    Hodnocení: 80 %

            špatnédobré        

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    Komentáře

    Vložit další komentář

    11.6.2018 23:33 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Systemd ? Alebo to bolo oneskorením na sieti čo spôsobilo timeout. Chyba protokolu NFS ?

    Root v linuxe : "Root povedal, linux vykona."
    Max avatar 11.6.2018 23:39 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Samá voda ...
    Zdar Max
    Měl jsem sen ... :(
    11.6.2018 23:58 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    To som čakal. Nexistuje šanca, že by som to uhádol.

    Root v linuxe : "Root povedal, linux vykona."
    11.6.2018 23:55 geg
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Stejné stroje s totožnou konfigurací. Není problém, když se tedy oba chtějí připojit? Byl ten druhý vždycky "druhý"?
    Max avatar 12.6.2018 00:01 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Ano, stroje jsem předal naprosto stejně nastavený. Nulový rozdíl (resp. rozdíl jen IP+MAC+hostname). Stroje se jmenovaly a byly nastaveny stejně a jména a IP se neměnily.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 00:03 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Toto by som nečakal od skúseného admina. Ale aj toto sa deje.

    Root v linuxe : "Root povedal, linux vykona."
    Max avatar 12.6.2018 00:09 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Vysvětli.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 00:10 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Že by si nechal tie isté ip v konfiguráku na obidvoch serveroch.

    Root v linuxe : "Root povedal, linux vykona."
    Max avatar 12.6.2018 00:13 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Jak z reakce "(resp. rozdíl jen IP+MAC+hostname)" usuzuješ, že byly stejné IP? Nebyly. Vše regulérně nastaveno, oba stroje měli rozdílné IP, rozdílné MAC i rozdílné názvy.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 00:32 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Ok. Jedine čo ma napadá je, že ten NetApp nezvláda viacnásobne súčasne pripojenie nfs.

    Root v linuxe : "Root povedal, linux vykona."
    Max avatar 12.6.2018 00:33 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Samá voda.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 00:34 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Ok. Tu ja končím. nemá zmysel pokračovať v hádani.

    Root v linuxe : "Root povedal, linux vykona."
    12.6.2018 00:14 MrG
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    #up all ethernet interface? $sudo nmcli d $sudo systemctl restart network

    cat /etc/systemd/system/nfs-client.target.d/DefaultDependenciesFalse.conf DefaultDependencies=False ?

    #better? sudo systemctl status nfs-server sudo systemctl status nfs-idmapd
    Max avatar 12.6.2018 00:17 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    systemctl status máš v blogu. Jinak všechny tipy samá voda :).
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 00:42 Odin
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Rsize wsize? ;-)
    Max avatar 12.6.2018 00:45 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Samá voda :)
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 03:09 pc2005 | skóre: 38 | blog: GardenOfEdenConfiguration | liberec
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Předpokládám, že na chybu není potřeba oracle ani jiné konkrétní softy.

    Tipnu si šílenost, chybějící mountpoint (nebo něco způsobující timeout), bg forkující při timeoutu (jsem tu volbu ani neznal) a systemd závislosti dokonají dílo zkázy?

    OT: není wsize/rsize zbytečně moc? stejně to Ip stack rozseká do MTU paketů ...
    Max avatar 12.6.2018 07:36 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Samá voda
    Zdar Max
    PS: mountpoint nastavoval týpek od Oracle, takže nebudu zpochybňovat, ale jsem vůči některým věcem skeptický
    Měl jsem sen ... :(
    12.6.2018 07:01 Michal Kubeček | skóre: 72 | Luštěnice
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Podle těch hlášek se vám podařilo nějak zacyklit závislosti mezi nfs-server.service a u02-oraredo.mount, ale jak se vám to podařilo, to bez konfigurace naslepo hádat nehodlám, stejně jako to, proč by na tom stroji vůbec měl běžet NFS server, když jste se o něm vůbec nezmínil.
    Max avatar 12.6.2018 07:50 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Ano, je to tak, správně jsi si všiml, že tam běží nfs server, že je tam kolize mezi nastavením nfs serveru a nfs mounpointy.
    Na rozjetí Oracle byla najmuta firma, aby provedli nastavení a další věci dle jejich zkušeností, protože jsme přecházeli na EE verzi Oracle, kde je spousta novinek a na jiný způsob storage.
    Výsledkem bylo, že týpek, co to rozjížděl, absolutně ohledně linuxu netušil. Nešel mu x forwarde (potřeba kvůli instalátoru Oracle), tak se pokoušel rozjíždět grafické prostředí.
    Nakonec jsem díky chybě v blogu i zjistil, že ani neví, jak připojit nfs. Jeden večer mi radostně napsal, že se mu podařilo připojit nfs.
    Chyba zmíněná v blogu byla zapříčiněna tím, že jen na druhém nodu nainstaloval nfs server a nastavil ho takto :
    cat /etc/exports
    /u02/oradata               192.168.1.1(rw,sync,no_wdelay,insecure,no_root_squash)
    /u02/oraredo               192.168.1.1(rw,sync,no_wdelay,insecure,no_root_squash)
    
    Takže kolize byla zapříčiněna tím, že ten člověk vůbec netušil, co dělá :-/.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 07:54 Aleš Kapica | skóre: 51 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Ó jé… Tak tohle jsem fakt nečekal.
    12.6.2018 09:25 klkl
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Takže pak už ale stroje nebyly totožně nastavené...
    Max avatar 12.6.2018 09:44 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Já jsem psal, že stroje jsem nastavil naprosto shodně a pak je předal. Když koukám do komentářů, tak tam se taktéž v tomto smyslu vyjadřuji konzistentně.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 12:55 hklt
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Ano, ale tak nějak jsem počítal, že stejně nastavené i zůstaly. Takhle by mohl provést cokoliv i smazat HDD... Můj první dotaz by tedy byl: "Vrtal jste se v tom?"
    12.6.2018 13:22 Michal Kubeček | skóre: 72 | Luštěnice
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    To je zbytečné, jak říká Greg House: "Everybody lies." Takže před odevzdáním si zazálohovat veškerou konfiguraci (a možná raději i checksumy úplně všeho) a po vrácení porovnat.
    Ruža Becelin avatar 12.6.2018 10:09 Ruža Becelin | skóre: 39 | blog: RuzaBecelinBlog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    To mate z toho, ze nechate nekoho hrabat na servery. Ten "specialista" mel sedet vedle admina a rikat co a jak, ne fyzicky sam neco delat.
    Max avatar 12.6.2018 11:40 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Zkušenost je taková, že většinou se nové instalace dělají po večerech na dálku. Nepamatuji se, kdy se něco někdy instalovalo lokálně, vždy to byl člověk někde na konci vpn tunelu s vymezeným přístupem, který pak dodal dokumentaci + proběhlo případné školení/diskuse na cca 2h.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 18:55 Käyttäjä 11133 | skóre: 58 | blog: Ajattelee menneisyyttä
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Od toho vymysleli MS Lync / Skype for Business, ne? :-) Zkušenost je taková, že tam kde jim na kvalitě záleží nejdříve procesy vyvinou, pak je otestují a pak je releasnou do produkce... Vývoj, test a release do produkce zajišťují zpravidla jiní lidé.
    Max avatar 12.6.2018 20:55 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Jednak se tu nebavíme o produkci, ale o testovacím prostředí, a jednak nevím, jak by to měl Skype/Lync řešit.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 20:58 Käyttäjä 11133 | skóre: 58 | blog: Ajattelee menneisyyttä
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    a jednak nevím, jak by to měl Skype/Lync řešit.
    Screensharing.
    Max avatar 12.6.2018 21:52 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Na linuxu to zas tak moc dobře nefunguje a řešit to přes nějaký druh vzdálené plochy je časově náročné. Jak už jsem psal, většinou to nefunguje tak, že se domluví den a člověk to celý den ladí, ale domluví se termín, do kdy to musí být a dotyčný to dělá v čase, kdy chce/může. Což může být během dne, nebo o po večerech a o víkendech. To je celkem běžná praxe.
    Outsourcing jako takový je stejně o nějaké té důvěře. Chápu, že tak, jak to popisuješ, to někde funguje, ale upřímně v tom vidím spoustu časových překážek.
    Zdar Max
    Měl jsem sen ... :(
    12.6.2018 22:10 Käyttäjä 11133 | skóre: 58 | blog: Ajattelee menneisyyttä
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Outsourcing jako takový je stejně o nějaké té důvěře. Chápu, že tak, jak to popisuješ, to někde funguje, ale upřímně v tom vidím spoustu časových překážek.
    To nemá nic společného s otázkou insourcované / outsourcované IT, ale mnoho s otázkou - jaký je service maturity level u služeb, jež má organizace doručuje. Tzn. veškeré procesy, včetně tvého inicializačního buildu by měly býti doručeny konzistentně, dle zdokumentovaného procesu, a při předávkách by měla být shoda - tedy kvalita tebou poskytované služby kontrolována; veškeré změny by opět měly býti zdokumentovány, zpětně revidovány, nepotřebné změny z procesu elimonovány a při předávce dalšímu článku v dodavatelsko-orběratelském řetězci (klidně v rámci te stejné organizace) by měl býti opět proveden audit, že je vše ve shodě s tím, jak to bylo - jako proces zdokumentováno.
    Max avatar 13.6.2018 09:40 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Hmm, aby to tak fungovalo, potřeboval bych tak ještě 3 lidi do teamu.
    Zdar Max
    Měl jsem sen ... :(
    13.6.2018 15:35 Käyttäjä 11133 | skóre: 58 | blog: Ajattelee menneisyyttä
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Quality, Cost, Delivery trojúhelník platí i v IT, nejen v automotive.
    12.6.2018 10:12 ewew | skóre: 40 | blog: ewewov_blog
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    Možno keby si predtým pozrie manuál k NFS možno by k tomuto nedošlo.

    Root v linuxe : "Root povedal, linux vykona."
    14.6.2018 00:01 citanus | skóre: 12 | Cork (Ireland)
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?

    boze asi se budu muset na systemd podivat poradne.. koukal jsem na ten vystup nekolikrat a stejne jsem to prehlid. A pritom to tam upne bije do oci. Michael je borec!

    12.6.2018 07:52 Aleš Kapica | skóre: 51 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    No, vzhledem k tomu že jsem to byl zrovna já, kdo ti vyprávěl jak jsem se minulý rok zrovna s tímto problémem trápil 14 dní než jsem na to vyzrál, tak odpovídat nebudu. Jsem jenom zvědav jestli ve vašem případě za tím nebylo ještě něco jiného.
    Max avatar 12.6.2018 07:53 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    Viz řešení v komentáři výše :).
    Zdar Max
    Měl jsem sen ... :(
    Agent avatar 12.6.2018 23:05 Agent | blog: Life_in_Pieces | HC city
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    A já čekal problémy při hraní NFS - Need fór speed
    Nevěděl zpočátku, co si počít, jak žít, co dělat, ale brzy se vpravil do role samotáře.
    Max avatar 13.6.2018 09:38 Max | skóre: 71 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Střípky z IT - (3) : NFS : Uhádnete, kde byl problém?
    NFS je pro amatéry. Profíci paří Counter Strike 1.6!
    Zdar Max
    Měl jsem sen ... :(

    Založit nové vláknoNahoru

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.