Dotaz: curl - hlášení curl: (28) SSL connection timeout

[mrtn]

Zdravím, pokouším se vyřešit následujcí:

Mám skript, který má stahovat na lokální použití (vlastní indexace a místní vyhledávání) jedny rozsáhlé webové stránky.

Stránky se stahují přes curl, ukládací se přílohy atd., potud dobré.

Kvůli velkému rozsahu běží skript v podstatě nepřetržitě a každý den někdy cca kolem druhé nebo třetí hodiny ráno se "zasekne" se shora uvedeným chybovým hlášením.

Potřeboval bych nějak nastavit, aby ten curl v případě problémů nečekal na odezvu, která zjevně nepřijde, a skript pokračoval dál.

Jak na to?

Odpovědi

[Jendа]

Prasárna 1: příkaz timeout

Prasárna 2: pustit na pozadí a po chvíli zkontrolovat, zda stále běží; pokud ne, killnout.

Prasárna 3: parsovat chybový výstup a hledat v něm tu chybu.

Korektní řešení: doimplementovat do curlu parametr, který to dělá.

[mrtn]

Prasárna 1: příkaz timeout

super, zkusím

Prasárna 2: pustit na pozadí a po chvíli zkontrolovat, zda stále běží; pokud ne, killnout.

No jo, to se ale stane někdy v noci/ráno, když u toho nesedím. Celý zbytek dne to jede v pořádku.

Prasárna 3: parsovat chybový výstup a hledat v něm tu chybu.

to už je nad mé znalosti

Korektní řešení: doimplementovat do curlu parametr, který to dělá.

k tomu směřoval můj dotaz, mám nastavené v curl "--max-time", ale to nepomáhá BTW žádná součinnost admina serveru nehrozí, to bych si musel oficiálně zažádat a zdůvodnit v korporátu, proč mi nestačí přednastavené uspořádání dat

[ET]

Prasarna 5: zastavit sosani mezi 2-3

[Jendа]

2 funguje stejně jako 1.

to už je nad mé znalosti

curl 2>&1 | grep --line-bufferred něco | while read line; do ...; done