Dotaz: wget & urcite subory

[catchy]

Ako donutim, aby wget stahoval iba urcite subory (napr. *.zip) z celeho webu, ktory som si dal mirrorovat.

Odpovědi

[ailas]

co rsync a volba include?

[maleprase]

z man wget:
-A povolené přípony / -R zakázané přípony
--accept=povolené přípony / --reject=zakázané přípony
Čárkami odd ělený seznam povolených/zakázaných přípon. Nap říklad, když si přejete stáhnout pouze soubory GIF a JPEG, pou žijete -A gif,jpg,jpeg. Když si přejete stáhnout vše krom ě neskladných soubor ů MPEG a .AU, pou žijete -R mpg,mpeg,au.

[unchallenger]

Ovšem je jasné, že wget musí stáhnout HTML soubory, které na ty věci odkazují, takže HTML asi nezakazovat...

Pokud mohu použít rsync, je to samozřejmě mnohem lepší.

[Martin Čížek]

Html soubory v povolených být nemusí. Wget je načte, rozparsuje odkazy a neuloží. Stačí tedy -A zip

[Kamorek]

Zdravim. Co bych potreboval:
Stahnout kazdy den v noci veskere bin aktualizace AVG 7.0 do adresare /home/all

Muj pokus o stazeni.Samozrejme do cronu to dat umim.:

wget ftp://ftp.grisoft.cz/pub/softw/70/update -A bin

Zkousel jsem i

rsync -avz ftp.grisoft.cz/pub/softw/70/update /home/all

Ale i kdyz se prihlasi uspesne, nic nestahne. Vim, ze je to prkotina, ale uz me to toci. Dik moc.

[ivok]

wget -A bin ftp://ftp.grisoft.cz/pub/softw/70/update/*

[Kamorek]

famozni. Dik

[Josef]

Potřeboval bych stáhnout virové databáze, ale nefunguje mi zadání souborů pomocí "*"
Viz výpis:
~/wget> wget -A zip ftp://ftp.nai.com/pub/datfiles/english/*
Varování: HTTP nepodporuje žolíkové znaky.
--10:41:58-- ftp://ftp.nai.com/pub/datfiles/english/* => `*' 10:42:02 CHYBA 404: Not Found.
Prosím o radu.

[ivok]

$ ftp ftp.nai.com
Systém je připojen k ftp.nai.com.
220 SNCDLFTP2 Microsoft FTP Service (Version 5.0).
...

Takže možná *.* ? Nevím...

Navíc nějak nechápu, proč se wget snaží používat HTTP (a jestli vůbec )

[Josef]

Díky za odpověď!

1/Také nevím, proč je zmíněno HTTP, když se snažím stahovat z FTP serveru FTP protokolem.
Snad to může souviset s naší proxy, nevím ..

2/Zkoušel jsem i "*.*". Je to stejné.
V manuálu k wget je určitá zmínka o různých interpretacích * znaků na různých ftp serverech. (STR.14 .. using of shell specific characters like *, ? .. is system specific. .. wget looks for a directory listing, thats is why it currently works only on Unix ftp servers, or on servers emulating LS output ..).
Jak je vidět, tento site však provozuje ftp server od Microsoftu ..

[Peter S.]

predpokladám, že v tom ftp strome nie sú žiadne html súbory, ktoré by odkazovali na zip súbory, takže v tom môže byť problém, možno že wget sa na to vôbec nehodí....
čo keby si skúsil curl alebo lftp. Teda lftp to by to malo zvládnut určite; len tak z hlavy - príkaz by mohol vyzerať takto

lftp -e ´mget -c /pub/softw/70/update/*.zip´ ftp.grisoft.cz

teda vlastne tu nie je riešený cieľový adresár, ale na to môžeš použiť aj prikaz lcd, alebo možno nájdeš aj niečo elegantnejšie:

lftp -e ´lcd /home/all;mget -c /pub/softw/70/update/*.zip´ ftp.grisoft.cz

[Josef]

>>možno že wget sa na to vôbec nehodí....
Mám stejný dojem.

>>čo keby si skúsil curl alebo lftp
Moc děkuju za tip. Jdu to zkusit ...

[Zaphod]

lftp ma velmi uzitocny prikaz mirror.
da sa tam pouzit regular expression, alebo hviezdickova konvencia.
lftp nema chybu Oplati sa naucit pouzivat - tiez som nim nahradil wget.