abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 17:25 | IT novinky

Do prodeje (Farnell) se dostal jednodeskový počítač Tinker Board (unboxing). Jedná se o konkurenci Raspberry Pi 3 od společnosti Asus. Porovnání (jpg) těchto počítačů například na CNXSoft. Cena Tinker Boardu je 55 £.

Ladislav Hagara | Komentářů: 7
včera 14:44 | Zajímavý projekt

Byla zveřejněna pravidla hackerské soutěže Pwn2Own 2017, jež proběhne od 15. do 17. března v rámci bezpečnostní konference CanSecWes ve Vancouveru. Soutěžit se bude o více než milion dolarů v pěti kategoriích. Letos se bude útočit i na Ubuntu. Jedná se již o 10. ročník této soutěže.

Ladislav Hagara | Komentářů: 1
včera 13:33 | Nová verze

Po sedmi měsících vývoje od vydání verze 5.7 byla vydána verze 5.8 (YouTube) toolkitu Qt. Z novinek lze zmínit například Qt Lite pro vestavěná zařízení. Nově jsou plně podporovány moduly Qt Wayland Compositor (YouTube) a Qt SCXML (YouTube). Současně byla vydána verze 4.2.1 integrovaného vývojového prostředí (IDE) Qt Creator.

Ladislav Hagara | Komentářů: 1
včera 11:52 | Pozvánky

Lednový Prague Containers Meetup se koná ve čtvrtek 26. ledna 2017 od 18:00 v Apiary, Pernerova 49, Praha 8. Přijďte se podívat na přednášky o Enterprise Kubernetes a Jenkins as a code.

little-drunk-jesus | Komentářů: 0
včera 11:40 | Pozvánky

Program letošního ročníku konference Prague PostgreSQL Developer Days, která se koná již 15. a 16. února 2017 na ČVUT FIT, Thákurova 9, Praha 6, byl dnes zveřejněn. Najdete ho na stránkách konference včetně anotací přednášek a školení. Registrace na konferenci bude otevřena zítra (24. ledna) v brzkých odpoledních hodinách.

TomasVondra | Komentářů: 0
22.1. 02:20 | Zajímavý článek

David Revoy, autor open source webového komiksu Pepper&Carrot nebo portrétu GNU/Linuxu, upozorňuje na svém blogu, že nový Inkscape 0.92 rozbíjí dokumenty vytvořené v předchozích verzích Inkscape. Problém by měl být vyřešen v Inkscape 0.92.2 [reddit].

Ladislav Hagara | Komentářů: 0
22.1. 02:02 | Komunita

Øyvind Kolås, hlavní vývojář grafických knihoven GEGL a babl, které využívá grafický program GIMP, žádá o podporu na Patreonu. Díky ní bude moci pracovat na vývoji na plný úvazek. Milník 1000 $, který by stačil na holé přežití, se již téměř podařilo vybrat, dalším cílem je dosažení 2500 $, které mu umožní běžně fungovat ve společnosti.

xkomczax | Komentářů: 12
21.1. 23:54 | Pozvánky

DevConf.cz 2017, již devátý ročník jedné z největších akcí zaměřených na Linux a open source ve střední Evropě, proběhne od pátku 27. ledna do neděle 29. ledna v prostorách Fakulty informačních technologií Vysokého učení technického v Brně. Na programu je celá řada zajímavých přednášek a workshopů. Letos je povinná registrace.

Ladislav Hagara | Komentářů: 0
21.1. 22:11 | Nová verze

Byla vydána verze 1.0.0 emulátoru terminálu Terminology postaveného nad EFL (Enlightenment Foundation Libraries). Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
20.1. 17:00 | Nová verze

Byl vydán Docker 1.13. Přehled novinek na YouTube a v poznámkách k vydání na GitHubu. Docker umožňuje běh aplikací v softwarových kontejnerech (Wikipedia).

Ladislav Hagara | Komentářů: 7
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (11%)
 (2%)
 (73%)
 (3%)
 (10%)
Celkem 387 hlasů
 Komentářů: 31, poslední včera 19:19
Rozcestník
Reklama
Štítky: není přiřazen žádný štítek

Dotaz: Jak schovat ROBOTS.TXT

29.7.2010 14:32 Honza-hloupý
Jak schovat ROBOTS.TXT
Přečteno: 411×
Ahoj lidi, 

mohl by mi někdo poradit to jak schovám soubor robots.txt před pot. útočníkem.... potřebuju schovat adresare před roboty ale nemohu pouzit meta nofollow z duvodu velkeho mnozstvi stranek, takže pouzivam robots.txt. díky honza

Řešení dotazu:


Odpovědi

poky74 avatar 29.7.2010 14:34 poky74 | skóre: 36 | blog: Zápisník | Vrchlabí
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT

Když útočník "najde" robots.txt, k čemu mu to asi bude?

Chcete Linuxové samolepky nebo Tuxe na klíče? ->
29.7.2010 14:37 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
No asi k tomu, že uvidí to co neni zaindexovane, tudiz muze byt admin brana, nebo cokoliv na co bude utocit...clear?
29.7.2010 14:38 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
No asi k tomu, že uvidí to co neni zaindexovane a indexovat se rozhodne nema, tudiz muze byt admin brana, nebo cokoliv na co bude utocit...clear?
poky74 avatar 29.7.2010 14:41 poky74 | skóre: 36 | blog: Zápisník | Vrchlabí
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT

Tak snad to máte pojištěné ne? Určitě to někdo najde i bez toho robots

Chcete Linuxové samolepky nebo Tuxe na klíče? ->
29.7.2010 14:37 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Jedině smazat a robotům ho posílat poštou :D
29.7.2010 14:39 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
napadá mě jenom NĚJAK pomocí rewrite, ale jak?
29.7.2010 14:43 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
tak přece jenom...nejlepší je se zeptat a i odpovědět :)

RewriteRule ^(.*)/robot.txt cokoliv.cokoliv

nějaké jiné řešení?
29.7.2010 14:54 Filip Jirsák | skóre: 66 | blog: Fa & Bi
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Jak chcete odlišit robota od útočníka? Pokud je nedokážete odlišit, schováte robots.txt buď všem (robotům i útočníkům), nebo nikomu.

Je nesmysl pokoušet se skrývat robots.txt – buď v nich máte adresy, které nikd ejinde nejsou a vyhledávač je žádným způsobem nemůže zjistit (pak jsou tam ale zbytečně), nebo tam máte adresy, které může vyhledávač znát, tím pádem je ale stejně tak může znát i útočník a schovávání robots.txt ničemu nepomůže, protože ty stránky stejně musíte zabezpečit nějak jinak.
29.7.2010 15:46 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
ještě jsem vygooglil tohle

do .htaccess pomoci rewrite:

RewriteCond %{HTTP_USER_AGENT} ^Mozilla  RewriteCond %{HTTP_USER_AGENT} !(Slurp¦surfsafely) RewriteRule ^robots\.txt$ /nejakejjinejsoubor-treba index.php [L]

a funguje to...koukal jsem do logu a prave prese mne prosvistel googlebot
Luboš Doležel (Doli) avatar 29.7.2010 15:54 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Takže až se budu chtít podívat na váš robots.txt, akorát si nastavím User-Agent na googlebota :-)
29.7.2010 16:02 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
hmm...nevim sice jak nastavit agenta na googlebota...ale tedy napada nekoho nejake reseni?
Luboš Doležel (Doli) avatar 29.7.2010 16:06 Luboš Doležel (Doli) | skóre: 98 | blog: Doliho blog | Kladensko
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Řešení neexistuje. Především řešíte neexistující problém. Že někdo zná URL vaší admin zóny, to ničemu nevadí. Že se dá do té admin zóny třeba nějak "vloupat", to vadí a na to se zaměřte.
29.7.2010 16:13 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Je na to třeba doplněk do firefoxu, jako google se člověk často dostane i tam, kam by se jinak třeba nedostal (chtělo by to po něm heslo, captcha a podobné).
Jendа avatar 29.7.2010 20:17 Jendа | skóre: 73 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
„To jsem nedávno zjistil, že naše televize jde ovládat po síti. Docela mě to překvapilo.“ „Jo? A kdo vám ji ovládal?“
poky74 avatar 29.7.2010 16:02 poky74 | skóre: 36 | blog: Zápisník | Vrchlabí
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT

To ti ale vůbec nepomůže, identifikace prohlížeče se dá libovolně měnit.

Chcete Linuxové samolepky nebo Tuxe na klíče? ->
29.7.2010 16:13 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
aha ...takže ani to že bych pripadne nejak rozeznaval bota od sufr. cloveka mi pomoci nema? prislo mi to jako nejlepsi ...hned od prvniho kontaktu z webem bud mu dam index(clovek) nebo kdyby to byl bot tak i robots.txt....tak nevim teda
29.7.2010 16:27 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Ale robots.txt přece nebude surfující útočník číst ručně. Na to si postaví robota ;) Co uděláte?
29.7.2010 16:25 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Řešení to není, pouze budete nabízet nějaký jiný soubor cokoliv.cokoliv pod názvem robots.txt, a to jak robotům, tak útočníkům.

Jste v situaci jako kdybyste chtěl robotům zpřístupnit index.html a útočníkům ne. Nejde to.

Ale i kdyby se k vám roboti a útočníci připojovali a identifikovali se certifikátem, stále můžete narazit na filozofické dilema, pokud útočník naprogramuje útočícího robota. Jak se s tím poperete? Povolit, nepovolit... :D
29.7.2010 16:32 Honza-hloupý
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Rozumím a děkuji
29.7.2010 16:46 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Pokud vám jde o to, aby robots.txt někdo nepoužíval jako rozcestník, lze možná (?) udělat to, co jsem teď někde zahlédl, že radili uvádět jen začátek názvů adresářů/souborů.

Například pro adresář /adresarstajnymnazvem/ a soubor souborstajnymnazvem.html:
robots.txt

User-Agent: *
Disallow: /adresarstaj/
Disallow: /souborstaj
Je mi divné že by to takto fungovalo, člověk by si snadno zablokoval něco co nechtěl, ale možné to je :)

Ovšem pozor, opět platí to co už bylo řečeno, pokud na ty stránky nevede veřejný link, tak se na ně nedostane ani robot a není potřeba je v robots.txt vůbec mín, a pokud na ně link existuje, útočník je může stejně najít buď ručně, nebo svým robotem, nebo nějakým veřejným robotem který robots.txt ignoruje.
29.7.2010 16:37 Ash | skóre: 53
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
31.7.2010 09:30 JF | skóre: 23
Rozbalit Rozbalit vše Re: Jak schovat ROBOTS.TXT
Podle me je uplna blbost utajovat robots.txt.

Pokud mas nejaky tajny adresar a zakazes ho v robots.txt, tak i kdyz znas jmeno adresare nepujde snadno zjistit co v nem je za podadresare. Pokud treba zakazes robotum indexovat adresar /1 a v nem mas adresar /1/tajne, tak apache ti neda sanci abys zjistil, jmeno adresare. Stranka se zobrazy pouze, kdyz zadas plne jmeno /1/tajne/soukromy.html

A pokud se bojis zaindexovani zkus tuto techniku: http://www.monkeys.com/cgi-bin/wpoison/wpoison.cgi Generuj stranku unikatne a jednorazove. Takze kazdy, kdo si stranku prohledne uz nikdy stranku s tim samym nazvem nezobrazi.

A nebo vsechny stranky osetri klicem /soukromy.cgi?2C8B52WHKXBML, ktery se bude generovat per user.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.