Intel IPU6 kamery na Linuxu pouze s open source softwarem

Intel IPU6 kamery pořád není snadné na Linuxu rozchodit. Kamery dosud potřebovaly proprietární software. Uživatelé Fedora Linuxu mohli sáhnout po balíčcích na RPM Fusion. Hans de Goede informuje, že si majitelé notebooků s těmito kamerami na Linuxu konečně vystačí pouze s open source softwarem. Potřebné patche jsou na cestě do upstreamu.

27.1.2024 23:33 | Ladislav Hagara | Komunita

Komentáře

[Petr Tomášek]

Takový sračky prostě nekupuju. Tím se problém vyřeší automaticky.

[PetebLazar]

Problém je, že i ve stejném modelu ntb se může v průběhu jeho výrobního cyklu složení doplňkových integrovaných komponent měnit. Takže "success stories" uživatelů (o bezešvé kernel kompatibilitě s kernelem) mohou časem pozbýt na platnosti.

[Peter Golis]

Ak by mi dodali tovar s inými komponentami aké uviedol výrobca alebo predajca v špecifikácii produktu, tak im to uvediem ako dôvod reklamácie.

Na nejaké success stories by som sa ja aj tak nespoliehal.

[dustin]

Je otázkou, zda takové detaily jako čip a způsob připojení interní kamery jsou ve specifikaci výrobce uvedené. Zde jsou specifikace dvou z ntb zmíněných Hansem

https://www.hp.com/in-en/shop/hp-spectre-x360-2-in-1-laptop-13-5-ef0053tu-6k7x3pa.html: HP True Vision 5MP IR camera with camera shutter, temporal noise reduction and integrated dual array digital microphones

https://www.lenovo.com/cz/cs/laptops/thinkpad/thinkpad-x1/ThinkPad-X1-Yoga-Gen-8-14-inch-Intel/p/LEN101T0052:

• FullHD RGB kamera s krytem pro větší soukromí
• FullHD infračervená hybridní webkamera s krytem pro větší soukromí
• FullHD + infračervená MIPI kamera s Computer Vision a krytem pro větší soukromí

[Peter Golis]

Pokiaľ také detaily niesú uvedené, tak si to rovno vyskúšam cez LiveCD. Na kamennej predajni s tým nezvyknú robiť problémy. Pri kúpe cez webshop to môžem vrátiť a peniaze sa mi vrátia.

Nebudem predsa platiť za niečo, čo nemá pre mňa potrebnú funkcionalitu kvôli ktorej som si to vybral.

PS: Ten druhý výcuc zo špecifikácií to mal uvedené, prvý len naznačené (MIPI). IR UVC sa používalo len veľmi zriedka (v tme niektoré modely zapli IR prísvit a odtiahli IR filter), takže by som spozornel.

[dustin]

Interní provedení "HP True Vision" může být kdykoliv změněno na úplně jinou technologii.

Jasně že si to můžeš vyzkoušet a případně vrátit v rámci 14 dnů, reagoval jsem na důvod reklamace - výrobce obvykle negarantuje, že nezmění interní provedení a to není součástí závazné specifikace.

[Peter Golis]

Preto sa kompatibilita určuje na konkrétny model a nie na celú produktovú radu.

[RealJ]

tak schvalne, najdi mi tady konkretni model kamery kterou pouzivaji... https://www.lenovo.com/us/en/p/laptops/thinkpad/thinkpadx1/thinkpad-x1-carbon-gen-10-(14-inch-intel)/len101t0009#tech_specs Naprosta vetsina uzivatelu nepotrebuje resit jestli je tam kamera ModelXYZ nebo kamera ModelABC. Naprosta vetsina uzivatelu resi ze to ma kameru ktera je podporovana s Windows v aktualni verzi. Detaily resi linuxaci protoze ne vsechen HW jim chodi v linuxu.

[Peter Golis]

Odskroluj si túto diskusiu vyššie, je tam spomenuté MIPI ktorého sa to týka.

[RealJ]

problem s pochopenim meho prispevku... neres...

[Peter Golis]

Áno, máš problém s pochopením. Pozri si produktovú špecifikáciu a nezaťažuj sa sumárnym porovnaním produktov.

[RealJ]

Slovak, Bratislava, co vice dodat...

[Peter Golis]

V tej špecifikácii výrobcu to bolo. V tebou linkovanom sumárnom porovnaní to nebolo. Čo viac dodať.

[..... Izak .....]

Vzdyt je to uplne jedno )) pokud da novy intel tak bude fungovat, pokud ne ted, tak za chvili - jasne ze umim presne zjistit, co za model ceho je v ktere rade, existuji stranky notebooku, kde lidi davaji vypisy z lshw etc. a maji tam presne PnP cisla hardware a jaky modul je umi v linux, uz vime, ze nektere intel potrebuji modul s closed FW - no a co ze

Kdyz je neco mega noveho, tak casto existuje gitgub modulu s tim, ze je tam i nasano, ze v tehle novychradach kernelu uz bude aktulizovan, nebo ze nebude, proze neco porusuji - pak takove moduly jdou do nonfree repositories, nebot jinde nez v USA s tim problem neni, RHEL s tim oficialne nic nema, ale uzivatel si to muze sam a legalne nainstalovat a to i ve firme - UTFG jedna takova DB je i zde na abclinuxu - ale tim, ze uz v linuxu min 15 let temer vse jede, tak uz to nikdo moc neresi a nikdo tak nema moc potrebu aktulizovat jednotlivy HW

https://cateee.net/lkddb/ Pouzijes google, svuj model a linux a ono to uz neco najde ) nebo tady: https://linux-hardware.org/?view=computers&type=Notebook neco malo zde: https://wiki.archlinux.org/title/Category:HP

[..... Izak .....]

To je sranda, dam do google HPE True Vision Linux - vybehne mi ze nefunguje kamera v default a primo HP rika, ze je treba pouzit tohle: https://github.com/intel/ipu6-drivers

[Peter Golis]

A čo ti na tom HW ukáže tento príkaz?

apt show intel-ipu6-dkms

[..... Izak .....]

Jake sracky, vzty to vzdy fungovalo, jen si to tahalo binarni FW pro tu kameru - a co jako ? to dela kupa modulu a HW - modul existuje, pohadky o tom, ze je neco slozite, co je prosim sloziteho na tom, ze se tam zavede modul do pameti a nemusim nic delat ? - NIC, ze jednou musim naintslovat jedno RPM, do akmod systemu fedory a ten se pak upgraduje a kompiluje zvlast pro kazdy novy kernel

[..... Izak .....]

Ja fakt nevim, co zde reiste, vubec neni pravda, ze je to problem rozchodit, kady roumny clovek ma fedoru a rpmfusin, kdy instalaci baliku pro vas prace konci, sam se pak upgraduje pres akmod i pri up[grade na novou verzi fedory, kernelu atd. - jine distra to maji urcite taky nejak osefovane.

Nechapu co se tedy resi, kdyz vse samo funguje a kamera je podprovana - to mame jak nvidia drivery, kdy si nekdo na neco stezuje - rpmfusion, fedora a uz ani nevim, ze mam nejakou nvidii - vse se upgraduje samo a nikdy jsme nemusel neco strahovat s nvidie, vse je v distribuci - od toho ty rpmfusion-nonfree repa proste jsou - kdo to enchape a tvra na 100% open source, sorry jako.

Ale jako jo, u nvida neexistuje nahradam, neco co nefunguje a 10x to zpomali pro me neni nahrada - ale zde to OSS reseni funguje uplne stejne dobre, aspon doufam, tak to nahrada je, jen aby jsme pak nedavali dalsi bullshit do blacklistu, jako ja noveau - aby se mi tam proboha nahodou nenatahl a neblokoval tak fungujici OpenGL akceleraci, kde vse funguje

[Peter Golis]

Skús ti to prečítať ešte raz, a možno pochopíš čo si v tvojich príspevkoch napísal nesprávne.

[..... Izak .....]

Nic ) ze je git s modulem a bud si to clovbek nainstaluje sam, coz pro BFU problem je, zebo ze to dotahne pres package management, coz problem neni zadny - nebot pak vse funguje automaticky a samo, najit si navod a jet podle navodu umi kazdy, kdo ne - sorry jako - chapu ze nekdo to chde mit rovnu v distro ...

hele co je problem, kdyz jsem koupil uplne novy model tabletu wacom - jeste ani nebyl v gitu, ale vedel jsme, ze je to stejny tabklet jako predchozi model, ze nam nic navic, tak jsme jen zmenil USB-ID - presnji jej pridal do jednoho include soubopru, prekopiloval modul a svete div se jel ) -- o par let pozdeji jsme koupil vetsi tablet a ten uz v gitu rovnou byl - a za par tydnu byl i v distribucnim kernelu fedory.

kdyz je modul a je dokonce balik pro distribuce, ze se sam aktualizuje s kernelem, tak zadny problem nevidim - tak ale nekteri slovaci byli vzdy takovy divni a vse je pro ne problem )

[Peter Golis]

Si stále na omyle, ten ovládač obsahuje binárny blob neznámej kvality. Ale kľudne sa zhovaďuj ďalej.

[..... Izak .....]

Ktery ale nebezi na CPU, ale uploaduje jej do kamery ze ? - jako naprosta vetsina serveroveho HW - balicek s FW ti asi nic nerika, kupa binarniho blobu, bez ktereho ty karty proste nefunguji, ale super je, ze clovek nemusi upgradovat FW v karte, ze ji nahraje novejsi pri nacteni modulu

[Peter Golis]

Library binary dependencies for ipu6-camera-hal

[..... Izak .....]

Je to jako Intel GPU - taky nefunguje nainstaluj si DavinciResolve a zjistis, jak ten balicke v distribuci na h* a ze tam nic nejede, takze musis stahnout binarni balicky API pro pousteni prikazu na GPU - bud od intelu, nebo z repositazu, uplne separe jen pro Intel GPU - a pak to teprve jede - jasne, pouzivat na vypocty intel kartu je trochu blbost, ale kdyz mas notebook a chce neco delat - jasen na desktop jedine nvidia a na tobeook Mac s M* a ten ma lepsi GPU, ne ktere se da i neco pocitat - btw. vse uplne uzavreny binarni blob ) - proste tak to chodi ... ale zde u kamery to nekomu vadilo, mozna primo RH a tak se rozhodli to zmenit, ano i o tom je OSS - principialne je to spravna cesta - zvlaste kdyz to bude fungovat stejne dobre, nebo lepe - u Nvidia je to slepa cesta, nebot tam to nebude fungovat asi nikdy

[Peter Golis]

Intel GPU mi funguje. Jak dekódovanie, tak enkódovanie.

Kľudne si používaj ten tvoj "tobeook", nazval si ho presne. Staničná ťa pochváli.

[RealJ]

vy jste se s Izakem nasli... :D

[Xerces]

Já kamery na nic nepoužívám, ale zrovna tento týden jsem pro někoho objednával takovou srágoru za 400,- s připojením přes USB a podporou Win10 a říkal jsem si, že když už to mám doma, tak to zkusím na Debianu. Instinktivně, poučen z rozcházení pokoutného HW před mnoha lety, jsem začal hledat na Internetu návody, jak to uchodit a nakonec stačilo zasunout a spoustit aplikaci (zkoušeno v cheese). Takže za mě palec nahoru všem co se točí kolem vývoje ovladačů a aplikací a samozřejmě jádra.

[..... Izak .....]

Stejna zkusenost, ja uz snad ani nic nezkoumam, strcim do USB a vim ze bude fungovat, zvlaste ty drazsi

Zvlaste kdyz si kupuji napr. Logi - paradoxne dobre funguje i MS - ale to je tim, ze jim to delal Logitech

Jasne muzu se podivat, zda to bude fungovat, poud je to neco opravdu draheho, tak to zkontroluji, ale treba drahy DAC jsme nezkoumal, nebot tam byl nejlepsi XMOS chip pro zvukovku a tam je krom komernich a velmi drahych FW na miru pouzit OpenSource FW a tak jsme vedel, ze bude fungovat - kde naopka nefunguje je windows - presneji any jela 24bit/192kHz je treba driver, i kdyz umi treba i 24/512 - bezneji 24/256 a nebo az 32/256 ci 32/512 - to uz je opravdu zbytecne - ono to ve windows bez driveru funguje, ale windows i nejkvalitnejsi HIFI hudbu zmrvi - takze je treba ASIO driver zvukovky, ktery obejde DirectSOUND - a ten paradoxm, az vyrobce prestane podporovat vas DAC, mate smulu i kdyby stal 100.000 kc - dejte si tam linux nebo mobil pres ROON-wifi

Pak zde mam fotaky a jeich vyuzivani, na to mame gphoto2 - a tim to jde vsemozne ovladat - tam uz je seznam nutny, profi kamery funguji dobre. - dokonce i foceni do PC, ne jen webcam.

A ted webcam pro Windows, cim lepsi kamera, tim hure funguje, presneji nefunguje, neumi auto expozici, vzdy jste podexponovani, neumi vyrezy nic ... takze je treba nutne nainstalovat specialni SW ke kamere, ten nahradi windows nefunkcni modul a pak vse funguje skvele, v linuxu funguje skvekle vse, nebot tam je nejake rozhrani a s tim SW pracuje a pracuje s nim dobre )

Pak mame fotaky, treba fujifilm ma SW a bez nej windows moc nefunguji, v linuxu ano, ale ted udelali kameru, ktera neni na tohle podprovana, ale umi to, bohuzel kdyz byl SW, tak se pri nastaveni ala webkam nastvailo, ze se nikdy nevypne a napajeni pres USB - nebo to jde vypnou, kdyz jsme dal kameru, co to nepodprovala, tak fungovala do tiemoutu a pak se fotak uspal - wtf, on se ma uspat kdyz nic nedelas, ne kdyz stremujes ) - zas* X-T5 - ale upravovali FGGW, tak uz je t mozna elpsi, a jde nastavit, ze se neuspi, ale proboha proc? to si ma nastavit, kdyz jde do webcam modu )) Paradox, GFX100S funguje jako web kamera skvele bezevseho ) - a nevypina se, ale stredoformat jako web cam je trochu overkill, kdyz jste se sklem na 10k euro

Takze me zkusenosti jsou presne opacne, na windows web kamery a casto i fotaky bud nefunguji bez SW, nebo funguji velice spatne - zatimco na Linuxu fungujio dobre vzdy, ale pokud je kamera extremne chytra a ma nejake extra fce - tak ty v linuxu nemate, pokud je neumi vas SW a nedal je na procesopru - u fotaku to nastavim ve fotaku - takze to jede vsude - jen ve windows vidite co mate nastaveno - v linuxu to vidite na diplayi fotaku, ktery se prepne do web modu - tam je skoro idelani si nastavit AF, manulani clonu+cas+ISO, simulaci filmu a jedem - pak to bude perfektni vzdy i ve windows - nebot mu zakazete na to sahat

[dustin]

Který DAC má XMOS s open source firmwarem? Rád bych si jeho zdroják implementace asynchronní UAC2 prohlédl.

presneji any jela 24bit/192kHz je treba driver, i kdyz umi treba i 24/512 - bezneji 24/256 a nebo az 32/256 ci 32/512

?? parametry 512 a 256 se používají u DSD, ale tam mi zase nedává smysl to 24/32... poněkud hodně zmatené...

Pokud to výrobce DACu zásadně nezmrví, implementace UAC2 XMOSu zvládá v pohodě nativní ovladač ve windowsech https://learn.microsoft.com/en-us/windows-hardware/drivers/audio/usb-2-0-audio-drivers. Samozřejmě je potřeba přistupovat přes WASAPI Exclusive. ASIO je dnes obvykle nutné jen pro DSD. Samozřejmě custom driver pro windows je potřeba pro update firmwaru...

[..... Izak .....]

Windows XMOS zvukovku/DAC zvlada ale mrvi zvuk - windows rad zvuk roztahne - interpoluje, sice nevim proc, ale to jeste muziku tolik nemrvi, ale pak kdyz je zarizeni jine, tak to misto interpolace natvrdo usekne ) - proste windows je na zvuk shit, vlastne ve windows skoro nic nefunguje poradne a musi se to vsemozne ohybat, kazda profi apka si taka svoje knihovny a casto i svoje drivery )

Napr. pro windows existuje hudebni prehravac, ktery vse obejde a umi uplne vse, vcetne jinych syntez nez PCM (napr. SACD) - ale stoji hezkych 500 USD ) - jini pouzivaji Foobar2000 - no v linuxu funguje vse - a je uplne jedno co se na DAC nastavi, muzu PCM - vse jede OK, muzu iec958 a nebo pro - coz nic nekontroluje a pokud tam poslu jpeg, tak to povoli - co s tim pak udela DAC je otazka, ale to je jeho vec - suma sumarum, linux nikdy zvuk nemrvil, velmi dobre rozumi co dela, ale co nechapu, default je to nastaveno pro CD kvalitu a musis se prejmenovat soubor pro hifi - s kecy aby nezatezoval CPU atd. nebo to tam dopsat, fedora ma samle inkrementalni soubor a tim se povoli vice bit a vetsi frekvnece, zajimave tez je, ze zvuk v tehle kvalite vubec nejde do DAC, pokud je zdroj horsi, povoluje se maximum a kdyz je prehravane mene kvalitni zvuk, jde to tam kline i 16/44 - tedy CD kvalita - linux umi i SACD, kvili testu jsme si par souboru v tomto vzorkovani stahl.

XCMOS - pred zvukovky a FW, pred mnoha lety jsme mel jeden DAC, co na tu dobu byl top a podproval az 600ohm sluchatka + utahl i bezne regalove hifi bedny (vyhodil jsem tak i sveho pioneera) - mel jsme v tom 300 ohm a pak 360 ohm - ted uz mam FIIO na sluchatka - no a k tomu byl kdysi odkaz na nejake zdrojaky, v te dobe jeste souceforge a git + binarni FW - ze se to updatuje pres ne, ze oni s tim nemaji nic spolecneho. Ted se uz to nesleduji, ale vim, ze primo XCMOS ma github: https://github.com/xmos pak maji devkity a SDK, na jednom foru jsme nasel oznameni, ze vydali novy openFW a ze ma clovek XMOS primo kontaktovat https://www.xmos.com/dev-kits-and-debug-adapters/

neco je tez tady: https://xcore.github.io/repo_index/index.html

[dustin]

Windows XMOS zvukovku/DAC zvlada ale mrvi zvuk - windows rad zvuk roztahne - interpoluje, sice nevim proc, ale to jeste muziku tolik nemrvi, ale pak kdyz je zarizeni jine, tak to misto interpolace natvrdo usekne ) - proste windows je na zvuk shit, vlastne ve windows skoro nic nefunguje poradne a musi se to vsemozne ohybat, kazda profi apka si taka svoje knihovny a casto i svoje drivery )

WASAPI exclusive je funkčně velice podobné alsímu hw:XX. Tipnul bych si, že se v MS alsou inspirovali, když to navrhovali (to už alsa existovala). Je to přímá cesta do driveru, dokonce může aplikace rovnou zapisovat do DMA bufferu zvukovky, pokud to driver podporuje (tedy úplně stejně jako alsa).

Napr. pro windows existuje hudebni prehravac, ktery vse obejde a umi uplne vse, vcetne jinych syntez nez PCM (napr. SACD) - ale stoji hezkych 500 USD ) - jini pouzivaji Foobar2000

Ano, foobar + wasapi exclusive plugin je téměř bit-perfect (až na interní zpracování ve 24 bitech (zřejmě float32), ale prakticky je 32bit ve většině případů nepotřebný).

ale co nechapu, default je to nastaveno pro CD kvalitu a musis se prejmenovat soubor pro hifi - s kecy aby nezatezoval CPU atd. nebo to tam dopsat, fedora ma samle inkrementalni soubor a tim se povoli vice bit a vetsi frekvnece, zajimave tez je, ze zvuk v tehle kvalite vubec nejde do DAC, pokud je zdroj horsi, povoluje se maximum a kdyz je prehravane mene kvalitni zvuk, jde to tam kline i 16/44 - tedy CD kvalita

Jak si nastavíš PA/PW, tak to máš. Nebo můžeš přehrávat rovnou do alsy, pokud to umí tvůj přehrávač a ty si to umíš donastavit.

linux umi i SACD, kvili testu jsme si par souboru v tomto vzorkovani stahl.

Alsa API podporuje DSD formáty. Protože UAC2 s DSD nepracuje, musí být podpora nativního DSD v modulu snd-usb-audio natvrdo zapnutá pro dané zařízení (VID/PID) příslušným quirkem. ASIO DSD umí. WASAPI ne.

XCMOS - pred zvukovky a FW, pred mnoha lety jsme mel jeden DAC, co na tu dobu byl top a podproval az 600ohm sluchatka + utahl i bezne regalove hifi bedny (vyhodil jsem tak i sveho pioneera) - mel jsme v tom 300 ohm a pak 360 ohm - ted uz mam FIIO na sluchatka - no a k tomu byl kdysi odkaz na nejake zdrojaky, v te dobe jeste souceforge a git + binarni FW - ze se to updatuje pres ne, ze oni s tim nemaji nic spolecneho. Ted se uz to nesleduji, ale vim, ze primo XCMOS ma github: https://github.com/xmos pak maji devkity a SDK, na jednom foru jsme nasel oznameni, ze vydali novy openFW a ze ma clovek XMOS primo kontaktovat https://www.xmos.com/dev-kits-and-debug-adapters/

neco je tez tady: https://xcore.github.io/repo_index/index.html

Hm, nic z toho není hotový firmware, tedy to, o čem jsi předtím mluvil. Zřejmě to nelze brát až tak vážně...