Přehrávání ZOH na Linuxu potřetí - archív

24.2.2010 20:30 | Přečteno: 2109× | Linux |

Tento zápisek navazuje na dva předchozí díly:

• Přehrávání ZOH na Linuxu
• ZOH 2010, ČT - přehráváme s MPlayerem

V "prvním díle" odvedl Martin kus práce, když popsal postup jak získat adresu playlistu pro přehrání v mplayeru. Poprosil o zautomatizování, což netrvalo dlouho. Následovalo několik dalších verzích, ve kterých přibylo několik vylepšení. Sám jsem několikrát přispěl, poslední verze už uměla využít Token uchovaný z minula, případně si vygenerovat nový.

Následoval "druhý díl", Česká televize zveřejnila přímé odkazy. Ty nedělají v podstatě nic jiného, že přes SOAP vygenerují odkaz playlist. Udělal jsem další verzi skriptu, který využívá tyto odkazy. Nicméně původní verze přežila a podařilo se rozjet HD stream. Tímto děkuji za nakopnutí

A dostávám se k dnešnímu dílu. Díky dalšímu nakopnutí jsem začal zkoumat možnost přehrávání archívních záznamů. Na webu ČT je jich hodně - zajímavé situace, rozhovory, fejetony... Otevřel jsem si tedy jednu stránku a hledal jsem Token a našel.

<param name="initparams" value='token=NDk5NDcxMjM3fDYzNDAyNTYxNDg2MzkwNjI1MA==,pic=http://img.zoh.cz/apollo/pictures/20102242403473529.jpg,video=ZOH390,' />

Zajímavě vypadá řetězec video=ZOH390. Vypadá přesně jako identifikátor, který je třeba pro vygenerování playlistu. Tak jsem to tedy zkusil. Vytvořil jsem SOAP zprávu s ID ZOH390 a Typem Archive. A tradá, obdržel jsem adresu na playlist kde bylo požadované video.

Pak už bylo jednoduché upravit skript tak, aby akceptoval typ vysílání ARCHIVE následovaný odkazem na url stránky s videem. Skript si stáhne stránku z odkazu, vytáhne si ID a spustí smplayer se správným playlistem. Pro správnou funkci je tedy třeba nejprve zjistit url ze stránek ČT. Odvážnější si můžou zahrát ruskou ruletu a zkoušet přímo zadávat náhodné ID. Například ZOH390, ZOH391, ZOH128. Skript tyto ID podporuje.

Skript jsem upravil a začal testovat. Jenže z ničeho nic přestal skript pracovat. Ale totálně. Nejprve jsem si myslel, že jsem někde udělal chybu, ale jak jsem nakonec zjistil, na webu ČT začali používat přesměrování a vyžadovat podporu cookies. Ke všem volání curl je nyní třeba přidat parametry "-c cookie_file" a "-L".

Po této úpravě začal skript opět fungovat a je tedy možno vychutnat si kanadský gól, který proletěl skrz síť brány:

zohd.sh ARCHIVE http://zoh.ct24.cz/article.asp?id=963

Případně rozhovor s Martinou Sáblikovou, ale ten mi teď nechce fungovat.

zohd.sh ARCHIVE http://zoh.ct24.cz/article.asp?id=485

Dostanu odkaz na playlist, ale smplayer nedostane data. Tohle se děje u všech starších videí. Server nestíhá, nebo tam je jiný problém?

Upravená verze skriptu je v prvním komentáři.

       

Komentáře

[Marián Kyral]

Příloha:

• zohd.sh (5518 bytů)

A skript.

[RoboShim]

Hele, je tam dvakrat grep -i token |grep -i token ve funkci getToken, coz asi nebude potreba.

[Marián Kyral]

Pravdu díš. To je tak, když člověk recykluje svůj vlastní příkaz a zapomene, že tam má .

[RoboShim]

A pak mam dotaz. Na N900 nemam curl, ale wget jo. Bylo by mozne vsechny CURL prikazy prepsat na nejaky obecnou download funkci a pak v te funkci podle nastaveni pouzivat bud curl nebo wget? Ted jsem koukal do toho skriptu, curl je pouzity trikrat. Ve dvou pripadech pouziva pouze cookie a -L (nasledovani presmerovani pomoci Location:). Ten treti curl posila navic dve vlastni hlavicky a post-data. Ve wgetu to jde takhle:

-c $COOKIE  .... --save-cookies=$COOKIE --load-cookies=$COOKIE --keep-session-cookies
-L .... wget dela automaticky nasledovani presmerovani
-H 'header text' .... --header='header text'
-d 'post data' .... --post-data='post data'
-d @postfile .... --post-file=postfile

Bylo by to mozne udelat? Ted jsem v rychlosti splodil neco takovyho, ale netestoval jsem to. Muzes to vyzkouset a pripadne zaclenit? Melo by stacit nahradit vsechny curl prikazy prikazem downloadwc (jako download wget curl). Pro curl se pouzijou zadane parametry, pro wget se zkonvertuji.

downloader="wget"
# downloader="curl"
function downloadwc() {
  case "$downloader" in
    "wget" )
      postdata=""
      i=$#
      while [ $i -gt 0 ]; do
        v="$1"
        shift
        i=$(($i-1))
        case "$v" in
          "-H" ) t="$1" ; shift ; i=$(($i-1)) ; set -- "$@" "--header=$t" ;;
          "-L" ) true ;;
          "-c" ) t="$1" ; shift ; i=$(($i-1)) ; set -- "$@" "--save-cookies=$t" "--load-cookies=$t" "--keep-session-cookies" ;;
          "-d" ) t="$1" ; shift ; i=$(($i-1))
            if [ "${t:0:1}" = "@" ] ; then
              set -- "$@" "--post-file=${t:1}"
            else
              postdata="$postdata${postdata:+&}$t"
            fi
          ;;
        esac
      done
      if [ -n "$postdata" ] ; then set -- "$@" "--post-data=$postdata" ; fi
      wget "$@"
    ;;
    "curl" ) curl "$@" ;;
  esac
}

[Marián Kyral]

Dříve než večer se k tomu nedostanu, ale zkusím se na to mrknout.

[Marián Kyral]

Příloha:

• new_zohd.sh (6563 bytů)

Tak jsem se na to mrknul. To roubování curl na wget mi přišlo moc násilné, tak jsem zkusil nějakou jednodušší funkci, ale nějak jsem ztroskotal na SOAP. Někde jsem udělal chybu a wget mi končil s 400 - bad request a curl pro změnu nevypíše nic. Neměl jsem moc čas si s tím hrát, takže pokud se to někomu povede úspěšně rozjet, tak budu rád za patch. Ale stejně už moc času nezbývá, konec se pomalu blíží.

V příloze !! NEFUNKČNÍ !! skript na hraní. Pěkně jsem to doprasil

[Andrej Herceg]

Problém je tam asi pridávanie tej SOAP hlavičky (tie úvodzovky sa "odstránia" pri tom vkladaní toho reťazca do premennej a potom sa pridá viac parametrov...).

Tá funkcia je asi zbytočne univerzálna, stačí tam dať 4x tie wget/curl volania a mohlo by to fungovať.

getHTML() {

  HEADER="Content-Type: text/xml; charset=utf-8"
  COOKIE=$(mktemp)
  DPROG=$(basename $DOWNLOADER)
  URL="$1"

  if [ "$2" ]
  then
    if [ "$DPROG" = "curl" ]
    then
        curl -H "$HEADER" -H "SOAPAction: \"http://ivysilani.visual.cz/services/GetPlaylistUrl\"" -L -c $COOKIE -d "@$2" "$URL"
    else
        wget --output-document=- --save-cookies=$COOKIE --load-cookies=$COOKIE --keep-session-cookies --header="$HEADER" --header="SOAPAction: \"http://ivysilani.visual.cz/services/GetPlaylistUrl\"" --post-file=$2 "$URL"
    fi
  else
    if [ "$DPROG" = "curl" ]
    then
        curl -H "$HEADER" -L -c $COOKIE "$URL"
    else
        wget --output-document=- --save-cookies=$COOKIE --load-cookies=$COOKIE --keep-session-cookies --header="$HEADER" "$URL"
    fi
  fi

  rm -f $COOKIE
}

[Marián Kyral]

Příloha:

• zohd.sh (6392 bytů)

Díky moc, někdy dělám věci až moc složitě. Hlavně takhle po večerech.

[Luk]

Především by měla ČT nechat dostatečně nadimenzovat servery a linky k nim, protože když jsem zkoušel přes Internet sledovat hokejový zápas s Ruskem, skoro to nefungovalo. Většinou to končilo HTTP kódem 503, občas to vůbec neodpovídalo, někdy to posílalo něco ve smyslu "omlouváme se za nefunkčnost". Část druhé třetiny se mi povedlo shlédnout, ale běželo to jen na střední kvalitu, na "TV kvalitu" už to nestíhalo.

(Rozumím tomu, že jsem si jako příklad vybral výrazně nejsledovanější část ZOH a neměl bych podle toho dělat obecné závěry. Jenže co mám informace od jiných lidí, přímé přenosy sportů s českou účastí byly vesměs problematické.)

[Ondrej 'SanTiago' Zajicek]

Především by měla ČT nechat dostatečně nadimenzovat servery a linky k nim

No, tohle spis ukazuje jak je marne snazit se vysilat video v takovem rozsahu unicastem. 4 Mb/s pro bezny TV stream * 10 tisic uzivatelu = 40 Gb/s, Cesko ma ale 10 milionu lidi. NACEVI (distributor videa pro CT) to sice castecne obchazi tim, ze ma distribucni body hostovane i u jednotlivych (odberatelskych) ISP, nicmene podstata problemu zustava.

[Grunt]

, jé, kéžby.

[Luk]

Faktem ale bohužel je, že unicast je zatím jediná použitelná cesta. Využití multicastu naráží na chybějící podporu na směrovačích.

[Grunt]

Omyl. Naráží na jednu jedinou věc: Neschopnost adminů to na těch krabičkách nastavit.

[Zdeněk Burda]

Dost používaných krabiček multicast podporuje pouze papírově - vlastní zkušenost

[Grunt]

To je fakt. U těch menších krabiček se to dá vyřešit OpenWRTčkem nebo nastaveným cross-kompilátorem. U těch dražších omlácením výrobci o hlavu, že má vůbec tu drzost chtít za takový krám takové prachy.

[RoboShim]

No panove, nerekl bych, ze unicast je nasazen pouze kvuli neschopnosti adminu aktivovat multicast na routerech (IMHO je na vetsine stejne jako default aktivni a maximalne se zapina IGMP snooping), nebo kvuli nepodporovani hardwarem.

V tomhle je unicast pouzity zamerne, aby bylo mozne kontrolovat klienty, kteri se pripojuji a chteji video stahovat.

Zrovna jsem sktiptik zkusil v CH a vubec me nepotesilo video "Litujeme, tento obsah neni kvuli omezenym autorskym pravum dostupny na vasem uzemi". A tuhle prasarnu samozrejme s multicastem tezko udelate.

Mam nejaky proxy v CR, tak to zkusim jeste pres ne, ale prvni pokus skoncil opet na "Litujeme..."

[kyknos]

ja bych preferoval, kdyby z dani a vypalneho zivena CT zadne zabavni servery nedimenzovala

[Luk]

Když už vybírá výpalné, tak ať za to člověk aspoň dostane funkční službu - a ne že se s velkým humbukem uvede něco, co pak nefunguje.

[kyknos]

ne ne, funkcni sluzba je jen zaminka pro dalsi a dalsi vypalne

CT je potreba zprivatizovat - pak at si provozuje co chce

[Luk]

ne ne, funkcni sluzba je jen zaminka pro dalsi a dalsi vypalne

Mně je tedy milejší výpalné a funkční služba než výpalné a nefunkční služba. Případ, že nebude existovat výpalné, v tomto porovnávání vynechávám.

CT je potreba zprivatizovat - pak at si provozuje co chce

Ano, též bych byl pro privatizaci ČT, nicméně toho se téměř jistě nedočkáme. Proto musíme brát jako fakt, že tu zůstane jako "veřejnoprávní" a výpalné se bude vybírat tou nejhorší možnou metodou (tj. s tím, že neplatí rovnost před zákonem a ČT má právo na získávání informací o tom, kdo odebírá elektřinu).

[kyknos]

jsou chvile, kdy by se fatalisti meli strilet

[frdrx]

Možná jsem něco přehlídnul, ale bohatě mi stačí mplayer -playlist a odkaz odsud Žádnej skript, žádný mono není potřeba.

Sáblíková tady: mplayer -playlist http://89.221.209.9/iVysilani/Services/Streaming/ClientPlaylist.aspx?id=NTAyMDc2MDgyfDYzNDAyNjMxNzQwODEyNTAwMA==

[Marián Kyral]

Skript má jednu výhodu, nepotřebuji spouštět prohlížeč (alespoň pro živé vysílání)

[Martin Beránek]

Koukám že jsem dobře zasel

[bigfood]

Děkuji mnohokrát za perfektní skript. Jen mi u sledování videí z archívu v mplayeru (konkrétně http://zoh.ct24.cz/article.asp?id=919) nejde zvuk (kodek?). Nevíte prosím, jak by se dal rozchodit? Balík w64codecs mám nainstalovaný.

Forced audio codec: mad
Requested audio codec family [wma9spdmo] (afm=dmo) not available.
Enable it at compilation.
Requested audio codec family [wma9spdshow] (afm=dshow) not available.
Enable it at compilation.
Cannot find codec for audio format 0xA.
Read DOCS/HTML/en/codecs.html!

[Marián Kyral]

Otevírám audio dekodér: [ffmpeg] FFmpeg/libavcodec audio decoders
AUDIO: 44100 Hz, 2 ch, s16le, 64.0 kbit/4.54% (ratio: 8005->176400)
Vybrán audio kodek: [ffwmav2] afm: ffmpeg (DivX audio v2 (FFmpeg))
========================================================================

[bigfood]

To mi vypisuje taky - při přehrávání kteréhokoliv z online kanálů, ale když pustím ten kokrétní odkaz z archívu, neumí najít kodek. Třeba to bude zastaralou verzí mplayeru (1.0rc2-4.2.3).

[Marián Kyral]

Tohle byl právě ten odkaz, který ses snažil přehrát. Ta verze mplayeru má možná vliv.

MPlayer SVN-r30554-4.4.3 (C) 2000-2010 MPlayer Team

[j3nda]

super skriptik. diky!

[gogloid]

Zaprvé bych chtěl poděkovat za perfektní skript, ale ne a ne rozchodit dump... jak bych měl poskládat parametry? Očekávané ./zohd.sh ARCHIVE http://zoh.ct24.cz/article.asp?id=1015 dump mi nějak nefunguje...

[Marián Kyral]

Příloha:

• zohd.sh (5555 bytů)

Tak teď už by to mělo fungovat. To je tak, když to člověk pořádně neotestuje.

[Marián Kyral]

Příloha:

• zohd.sh (5611 bytů)

Tak teď jsem zase naboural live streamy. Měl bych jít spát...