Ffmpeg Webm stream (vyřešeno)

Dobry den.

Mam zprovoznene reseni pomoci ffserver a ffmpeg, ktere prijima RTSP stream z IP kamer a dale stream prevadi do formatu Webm (VP8), ktery je ve forme live streamu zobrazovan na strance. Potykam se posledni dobou s problemy, kdy se zacnou v nahodnych intervalech objevovat chyby a stream pak dela mirne artefakty, casteji se spise ale zastavi kompletne jeho prehravani. FFmpeg je ve verzi 3.2.2. stable, OS je Ubuntu server 16.04 LTS 64 bit, kernel 4.4.0-57.

IP kamery jsou VIVOTEK IB8369A a nejaka Ubiquiti AirVision, presny typ ted nezjistim, jelikoz nemam do ni pristup (streamuju verejnou IP kameru pro otestovani). Obe kamery posilaji RTSP stream ve formatu H264. Reenkoduju do VP8, kvuli tomu, ze ma stream byt zobrazovatelny na velke skale zarizeni, bez nutnosti flashe a komercnich HTML prehravacu. Pozadavek byl puvodne na pouziti open source.(V podstate open source neni kritickou podminkou, jen to ma byt zdarma)

V terminalu se mi objevuji nasledujici zpravy:

**************************Pokus 1****************************

Invalid UE golomb code

[h264 @ 0x3ebbee0] cbp too large (3199971767) at 52 25
[h264 @ 0x3ebbee0] error while decoding MB 52 25
[h264 @ 0x3ebbee0] concealing 1597 DC, 1597 AC, 1597 MV errors in P frame

**************************Pokus 2****************************

[[h264 @ 0x49c6d60] Invalid level prefix
[h264 @ 0x49c6d60] error while decoding MB 50 23
[h264 @ 0x49c6d60] concealing 1759 DC, 1759 AC, 1759 MV errors in P frame

**************************Pokus 3****************************

[h264 @ 0x4bc79a0] corrupted macroblock 64 33 (total_coeff=-1)
[h264 @ 0x4bc79a0] error while decoding MB 64 33
[h264 @ 0x4bc79a0] concealing 945 DC, 945 AC, 945 MV errors in P frame
rtsp://10.1.xxx.1:554/live/ch00_0: Operation not permitted

Tyto chybova hlaseni se objevi vzdy predtim, nez stream vypadne, pokazde vypadne s jinou chybou, ale tyto vyse uvedene se objevuji nejcasteji.

FFserver.conf, ve kterem je zapsana konfigurace je nahran pastebin

Prikaz pro predani streamu do FFserver pouzivam nasledujici:

/usr/bin/ffmpeg -stimeout 5000 -rtsp_transport tcp -i "rtsp://10.1.xxx.10:554/live.sdp?tcp" -an -threads 2 "http://localhost:8091/feed1.ffm

Podle chyb, ktere se objevuji, to vypada, ze je problem pri prijmu H264 streamu. Pri pouziti jinych formatu prijimaneho videa, se tento problem nedeje. Dokonce i staticky soubor, streamovany takto "live", se prehrava normalne a nechybuje

Setkali jste se nekdo s problemy pri prijmu H264 streamu pomoci ffmpeg? Stalo me to i hodne dni a tydnu googlovani, obdobny problem maji i jini uzivatele, jenze jsem zatim nenasel spolehlive reseni. Casto se jedna o vlakna jiz nekolik let bez odezvy. Kdyby jste me mohli nekdo nasmerovat na co se jeste zamerit, byl bych moc vdecny :) .. V pripade ze je potreba podrobnejsi logy, tak je poskytnu

If you will not cooperate, you are to be executed! | Starting as a DJ

Odpovědi

Netuším co je za problém, ale když vidím FFServer, tak jenom upozorním, že je to v FFMpegu problematická a málo udržovaná komponenta. Část "jestřábů" ho chce zrušit a smazat, maj tam okolo toho dost flamewarů mezi vývojáři (nebo je to aspoň bod, kolem kterého se ty antipatie a hormony materializují).

Nedávno se vymyslelo takové ultimátum, že když ho někdo nezačne udržovat, tak do třech měsíců půjde do kopru, ale pak tam na posledních chvíli Michael Niedermeyer poslal nějaký patche a k nelibosti ostatních to "zachránil" (a přijde mi, že se o to teď furt hádaj).

To jenom pro informaci, že tu ta věc nemusí být věčně a v očích řady lidí měla být dávno nejen deprecated, ale pryč. (Tak nevím, možná poslat mail na list nebo zprávu na IRC, že to má uživatele...)

Jinak jestli můžu hádat, tak bych si tipnul že ty hlášené jsou z chyby na vstupu a je to packet loss u toho h.264, co ffmpeg dostává. I když teda nevím u toho posledního "operation not permitted", třeba se tam nějak posere ten vstup celkově?

Jestli to dobře chápu, tak je problém, že to poškozené video ffmpeg nerozdejchá a nepokračuje v překódovávání streamu? V takovým případě by se to asi dalo hlásit jako chyba, ale bude třeba poslat vzorek videa, které ho takhle složí. (A zkontrolovat předtím, jestli to dělá i aktuální head). Správně by asi měl jet dál a nějak maskovat ty chyby, dokud nedostane nový klíčový snímek, terý to spraví, a jestli spadne nebo se zasekne, tak je to bug.

Co bych zkusil, použít nějaký nástroj, který by to přijímané video ukládal bez rekomprese na disk do souboru (nikdy jsem s tímhle streamováním nedělal, takže nevím, jak a jestli je to možné), aby byl původní video stream uložen. A jestli v tomhle dumpu najdeš místo, které tuhle chybu konzistentně háže, tak to střihnout na co nejmenší velikost, při níž ten problém ještě vyvstane (testovat buď s ffmpegem, nebo ffplay, počítám), a ten poskytnout s bug reportem.

Ale jestli ten vstup z kamer prostě vypadne a je třeba aby člověk znovu nabázal spojení, tak nevím, jestli to je jejich problém.

Vypada to, ze se mi to podarilo vyresit. On nejaky packet loss se v siti objevuje, ale pocet ztracenych paketu je zanedbatelny a stream by to v poradku mel prezit (Z cca 7000 paketu 64kb se ztratilo tak 30).

Pomohlo mi pouziti novejsi verze ffmpeg (konkretne stable 3.2.2) a pridani parametru -max_error_rate 1.0, ktery pribyl v novejsi verzi. Podle popisu nastavuje maximalni toleranci chyb, ktera je pripustna, hodnota 1.0 pak znamena 100 procent. Rovnez interval klicoveho snimku jsem na kamere zmenil na 1 sekundu.

Stream jiz od teto zmeny bezi v poradku cca 2 tydny, pri prehravani se jiz nezastavuje a neobjevuji se chybne bloky.

Zkousel jsem take i streamovani pomoci VLC, kde se mi podobne chyby tykajici se H264 kodeku objevovaly take, nicmene stream to v pohode prezil, jen se objevovaly pak hlaseni o zvyseni velikosti bufferu.

Dotaz tedy uzaviram, pomoci ffmpeg to jiz bezi tak jak bych predpokladal. No doufam ze se to za 2 mesice zase neposere :D

Diky za tipy.

If you will not cooperate, you are to be executed! | Starting as a DJ

7.2.2017 21:32 Ovoce | skóre: 16 | blog: Vyplizlo_ze_zivota
Rozbalit Rozbalit vše Re: Ffmpeg Webm stream

Pohlídej si ale to možné odstranění FFServeru z FFmpegu. Nevím, jak to s ním vypadá, ale až na pár vývojářů by ho většina chtěla zrušit, jak jsem napsal výš.

Nevím, co by se proti tomu dalo kdyžtak činit, ale aspoň se na to připravit.

13.6.2018 19:20 fake flame
Rozbalit Rozbalit vše Re: Ffmpeg Webm stream

Ja mam este lepsi napad zrusme vsetku podporu pre multimedialny obsah v prehliadacoch a bude pokoj, tak ako to urobili s npapi... a my co pouzivame stream z dvr sa mozme ist past uz teraz.... stream z kamier cez rtsp v html5 nieje a vraj ani nebude... a oni zrusia npapi namiesto toho aby problem z bezpecnostou vyriesili...

Dotaz: Ffmpeg Webm stream

Odpovědi