Sestava pro live reencoding mpeg2->4

23.5.2008 13:22 | Přečteno: 1531× | Linuxové báchorky

Zdravim

Rozhodli jsme se v siti zacit experimentovat po vzoru czelanetu s IPTV. Prvni, s cim chceme zacit je prevyst DVB-T v MPEG-2 do ethernetu v MPEG-4. A na to potrebujeme hodne brutalni vykon. Takze jsem neco poskladal do kosiku:

Zakladni deska intel P35: http://www.czechcomputer.cz/product.jsp?artno=46439

Core2Quad Q9450: http://www.czechcomputer.cz/product.jsp?artno=53822

Fortron ATX-450PNF: http://www.czechcomputer.cz/product.jsp?artno=48775

1Tbyte disk WD GP: http://www.czechcomputer.cz/product.jsp?artno=48550

Hitachi 7K160 80GB 8MB: http://www.czechcomputer.cz/product.jsp?artno=41739

DVB-T Leadtek DTV2000 H: http://www.czechcomputer.cz/product.jsp?artno=36463

2x 1Gb ram 800 CL4: http://www.czechcomputer.cz/product.jsp?artno=38525

Vychazim z predpokladu, ze live reencoding pracuje asi takhle: rychle do procesoru, tam rychle zpracovat a zase rychle sitovkou ven. Rekl bych ze to vubec nebude narocny na disk nebo na RAM. Puvodne jsem tam chtel 2x 512, ale kdyz oni jsou tak levny... Na system je tam ten 80Gb disk (nejlevnejsi co ma vetsi cache) a na data ten 1Tbyte. S raidem zatim nepocitam.

Trochu me mrzi ta TV karta. Zatim chceme zacit s levnou DVB-T a pozdejc jit do DVB-S2. Tenhle leadtek je jedinej co ma CZC skladem a na linuxtv.org pisou ze je podporovanej. Skoda ze uz neni v nabidce lifeView Trio, po detskych potizich muzu rict ze je to suprova karta.

V tuhle chvili resime HW. Software budu resit az to bude nainstalovane a zapojene. Avsak jedno je jiste: Arch Linux.

Prosim o jakekoliv komentare, diky.

Zdenek

       

Komentáře

[Chocolate Bear]

Prvni, s cim chceme zacit je prevyst DVB-T v MPEG-2 do ethernetu v MPEG-4.

Něco takovýho pravděpodobně dělat vůbec nesmíte.

[Kvakor]

A ploc?

Pokud se to nebude sirit mimo lokalni sit, tak je to (dle meho chabeho pravnickeho nazoru) ekvivalenti klasickemu antenimu rozvodu. A to legalni je, i kdyz je to vzhledem k mizernosti nasich zakonu docela varchlate (napr. vlastnici bytu musi by zaroven vlastniky anteniho rozvodu, nebo tak nejak). No schvalne, kdo z tech, kteri bydli v napr. druzsevnim byte v baraku s antenim rozvodem, musi platit navic poplatky za sireni televiznich programu kabelem, jako to musi ze zakona delat kabelovky?

Jedinou podminkou ale je, ze kazdy, kdo to bude prijimat, platil televizni poplatky nebo alespon byl clenem domacnosti, ktera je plati, ale to nepovazuju za problem.

[trekker.dk]

A to legalni je, i kdyz je to vzhledem k mizernosti nasich zakonu docela varchlate (napr. vlastnici bytu musi by zaroven vlastniky anteniho rozvodu, nebo tak nejak)

Jinak by se musely někomu platit poplatky, mám ten dojem

[PeDRo]

osobne bych dal 4gb ram, 550 psu a ty disky 2x500 do raidu

[vlk]

osobne mi tato vec uz niekolko rokov funguje na Pentiu 4 HT, 2.4GHz, 512MB RAM a vytazi to obidva (HT) jadra asi na 60% v plnej DVBT kvalite. (vstupny mpeg2 je do 1MBytes/s) k prevodu pouzivam VLC.

ale castejsie konvertujem rozlisenie na polovicnu velkost, ktore dokonale pohlti prekladane riadkovanie a znizi traffic na sieti - aj ked to do sieti vysielam cez multicast. a vtedy to vytazi obidva jadra uz len asi na 20%.

zvuk nechavam v povodnej kvalite - nekonvertujem vobec.

tvoja zostava ... hmm ... kolko kanalov chces konvertovat v realnom case sucastne ? :)

[Jimmy]

Pravděpodobně se jedná o inspiraci v Pilsfree a tam už se enkóduje do MPEG-4 19 TV kanálů. Proto čím silnější stroj, tím lépe.

[Mandarinka]

Hm, tak jestli to má být víc než pár kanálů, tak tak to opravdu 4jádro, respektive ani to nebude stačit. Asi jich budete potřebovat víc.

[dELl]

Jak vas tak posloucham :) Nasel by se nekdo kdo mi zpristupni ten VLC video server prez internet za prispevek na provoz?

[Mandarinka]

V xvidu se dá udělat realtime určitě i na slabším stroji. Vzhledem k dekódování a filtrování by mělo stačit dvoujádro. Použijete 1-pass, vypnete trellis, snížíte trochu kvalitu motion-search a máte. Případně by se nejspíš něco takového dalo udělat s použitím x264 - vypnout CABAC; subme nastavit na 5; frameref na 1-2; trellis 0; vypnout brdo, zapnout fast p-skip, me nastavit na hex, merange 16 nebo míň (zkusit 8) v případě, že použijete me umh, ale to bych nedělal. Dále no-ssim a no-pnsr

Lepší pokyny najdete na www.doom9.org ve fóru mpeg4 avc encoding. Výhoda je, že tam se o tom rozepisují i sami vývojáři. Například já neznám vlv jednotlivých partitions search an rychlost.

P.S. na deinterlacing je poměrně rychlý yadif (schopný realtime i na 2GHz Athlonu XP), i když tyhle algoritmy vždycky fungují jen částečně. x264 umí enkódovat interlacovaně, byť s nižší efektivitou, tímto způsobem byyste však mohl přenést zátěž na přehrávač klientů.

Třeba tohle -

--bitrate 1800 --level 4.1 --keyint 300 --min-keyint 30 --ref 2 --bframes 2 --b-pyramid --bime --weightb --no-cabac --analyse i4x4 --ratetol 0.8 --thread-input --no-psnr --no-ssim

dělá přes 15fps na A64 2GHz, přičemž se enkódovalo ze zdroje 720x480 H.264 highprofile. Takže 25 fps na nevytíženém jádře (když budete mít dvoujádro) by to dalo. Počítám, že by vám měl stačit Athlon X2 2,6 GHz nebo tak, případně ještě lépe nějaké core 2 na podobné frekvenci.

[Mandarinka]

hm, vidím, že kdůli použití implicitních voleb tam toho moc není vidět, ta komandlajna například předpokládá me hex, subme 5.

[Mandarinka]

Jo, další věc, na kterou jsem zapomněl. Chce to ohlídat (přes ratecontrol), aby nedocházelo k větším než nezbytně nutným výkyvům bitrate. Jednak je ve špičkách rychlost kódování nižší, ale co je důležitější, síť je při nich víc zatížená a když na to kouká hodně lidí, tak se ta zátěž nějak bue sčítat... Zkrátka až budou zprávy, hokj nebo 24 hodin tak to všem začne vypadávat.

[ludvik]

Příloha:

• mediaserver.png (49855 bytů)

Hraju si s http://www.czechcomputer.cz/product.jsp?artno=32308, nevidím problém. Akorát to používám v analogu.

Paměť: nepodstatné, obsazení 230M, třikrát recoding a streaming VLCčkem. Plus pár dalších služeb. Disk: pokud chceš jenom streamovat, je ti to fuk. Vždyť se nepoužívá, pár giga na systém stačí. CPU: 3 kanály z analogu do MPEG4 (mp4v, neplést s x264) vytížení cca 45% ve špičkách na jádro (mám 1.6GHz quad). Pro x264 to roste tak na trojnásobek (ale rozchodit se mi to nepovedlo, dej vědět, jak tobě). Board: nemám možnost příjmu DVB-T, ale co vím, tak tyhle karty umí přijmout vždy jeden multiplex. A pokud vím, tak mají být 4. Aby ti nakonec nevadili ty 3 PCI sloty. S kartama do PCIe zkušenosti nemám.

Pilsfree do MPEG4 reencoduje pouze slabší bitraty (a ve 1/4 rozlišení) pro mediaplayer, kodek myslím MP43 (divx3). V plné kvalitě to pouští přímo v originále MPEG2 z DVB-T. Pokud se tady někdo od nich objeví, může tuto informaci zpřesnit. A kvalita mi přijde poměrně nevyrovnaná. Samozřejmě, nejsou duchy, barevnost je fajn, ale dost často buď kostičkuje, nebo má výpadky (celý řádek, dost znatelné). Je vidět, že české DVB-T je o ničem, moc kanálů v jednom multiplexu a často nestačí bitrate.

Jestli nehodláš experimentovat se streamingem do settopboxů, vykašli se na h264. Co jsem stihnul vygooglovat, tak buď umí MPEG2 nebo MPEG4-AVC (tedy h264). MPEG2 má zbytečně velké bitraty (pro dobrou kvalitu) a h264 zase nároky na CPU. Normální MPEG4-ASP (kodek mp4v) je vcelku v pohodě, na běžném kompu (C2D 2.6, ATI 2600) při přehrávání ve VLC prakticky neznatelná zátěž CPU.

[Zdeněk Štěpánek]

Zdravim

Precetl jsem si diskuzi az ted, takze reaguji az ted na vsechno:

Zatim chytam jen MUX-A, takze to je 5 programu (CT1, CT2, CT4Sport, CT24, Nova). Chtel bych konvertovat vsech 5.

Uvidime jak to vytizi ten komp. Spis se pak trochu bojim propustnosti PCI sbernice, kdyz bych tam nacpal vicero karet nez 3.

Zcela urcite to chceme posilat do settopboxu. Nasel jsem ke koupi jen tyto:

http://www.ipmedia.cz/default.asp?cls=stoitem&stiid=844

MPEG-2 prichazi v uvahu jen pro lokalni LAN, prechod na MPEG-4 je nevyhnutelny, takze chceme jit hned do toho.

Zdenek

[ludvik]

O sběrnici se neboj ... mám 4 karty v analogu (přibližně 25MB/s na jednu, pokud to dobře počítám). Kdežto jeden digitální multiplex má cca 23Mbit, tedy méně než osminu.

Jsem poměrně skeptický, že se ti povede dělat 5 MPEG4-AVC streamů na jedný mašině. Ale zkus to a dej vědět, taky jak na to jdeš ... mě se stream s kodekem x264 nepovedlo přehrát ani ve VLC.

Oni cpou pět programů do jednoho multiplexu? Proboha ...

Pro jistotu bych být tebou koupil spíš dvouprocesorovou desku a pro začátek vybavil jenom jedním xeonem.

[ludvik]

Ještě dotaz: ty máš vymyšlené financování? Jsem poměrně skeptický, že si někdo (člen sdružení) koupí settopbox za šest tisíc, aby sledoval negarantovanou televizi (tedy pokud jsi běžné "komunitní" občanské sdružení).

[Zdeněk Štěpánek]

Tohle neni komercni projekt, takze financovani neresim, penize na hrani jsou, tak to koupime no, navic mpeg-4 settopbox bez HDTV vymozenosti je o tisicovku levnejsi.

Pet programu v jednom multiplexu nevidim jako problem, jeste je tam asi 6 radii. Dokonce bych uvital kdyby tam narvali i Primu, i kdyby sel bitrate o kousek dolu.

Dvouprocesorovou desku s xeonem na tento "testovaci" projekt urcite kupovat nebudem, tolik penez na to nedam. Pokud se to osvedci, tak potom urcite koupime profi server s xeonama.

Me je vpodstate fuk v jakym to bude kodeku, ale v budoucnu to musi schroupat ten settopbox, az ho koupime.

Je to podobny jako s VoIP. Sluchatka, mikrofon a komp je proste reseni nanic, nikdo takovej voip nechce (skype je sra..a, ne VoIP), teprve just-work sipury s klasickym telefonem udelaly diru do sveta.

Takze to chce blbovzdorny settopbox s dalkacem a cisla programu. Zbytek uzivatele nezajima.

Zdenek

[ludvik]

To je mi jasné, že to děláš jen tak pro nic za nic ... jako já Nemyslel jsem to tak, že bys to těm lidem platil. Ale spíš z jejich pohledu - je to pro ně dost peněz za něco vlastně amatérského. Tohle je použitelné spíš jako doplněk, pro takové ty situace, kdy televize běží jenom jako pozadí při práci.

Štve mě prozeta, už dlouho společně myslím s coprosysem vyvíjejí stb pro MPEG4, má to umět i 802.1q VLAN (tedy televize na jiné vlaně, než samostatný net), několikaportový switch, sip klient. A za lepší peníze, než tohle amino. Jenže to mělo být hotové už loni a zatím furt nic.

Geniální by bylo postavit si STB vlastní, třeba na nějaké mikroATX VIA. Jenže to vyjde zaručeně dráž, než to amino.

[Zdeněk Štěpánek]

U homemade HTPC je problem. Cenove to zacina uz kolem 6000, ale automaticky tam je HDD a DVD mechanika.

Pokud nekdo chce jeden univerzalni pristroj co umi vsechno a dokaze to softwarove zkrotit, pak je HTPC super volba.

Kdo chce blbovzdornou krabici kde jen macka cisla programu, tak zatim jedine to amino.

Pro HDTV je zase problem ze to dnesni procaky a grafiky pocitaj hrubou silou a pak to strasne topi a huci. IPTV STB na to maj specialni cip co umi jen ten jeden svuj kodek a maj po starostech.

Zdenek