AbcLinuxu:/ Články / Jaderné noviny – přehled za květen 2024

Štítky: BitKeeper, BPF, Git, hardware, Jaderné noviny, jádro, kernel, Linus Torvalds, Linux, přehled, RAM, souborové systémy

Jaderné noviny – přehled za květen 2024

10. 6. 2024 | David Kolibáč | Jaderné noviny | 5152×

Přehled květnových vydání Jaderných novin: stav vydání jádra, citáty týdne a seznam článků týkajících se jádra.

Vydání z 2. 5. 2024

LWN.net Weekly Edition for May 2, 2024.

Stav vydání jádra

Kernel release status. Jonathan Corbet. 1. května 2024

Vývojové jádro 6.9-rc6 bylo vydáno 28. dubna. Linus Torvalds řekl: „Věci se jeví nadále docela normální a nic tady opravdu nevybočuje.“

Stabilní aktualizace: 6.8.8, 6.6.29, 6.1.88 a 5.15.157 byly vydány 27. dubna. 6.1.89 byla vydána 29. dubna s opravou problému v sestavení.

Stabilní aktualizace 6.8.9, 6.6.30, 6.1.90, 5.15.158, 5.10.216, 5.4.275 a 4.19.313 byly revidovány a očekávány 2. května.

Citát týdne

Quote of the week. Jonathan Corbet. 1. května 2024

Abych své osobní obavy vykreslil, přiznám se, že jsem trochu znechucený těmi, kdo poučují o spolehlivosti softwaru, zvláště když provádějí nepříznivé srovnání s takovými věcmi jako stavba domů. Rozdíl je samozřejmě v tom, že průměrný dům není vystaven aktivním útokům národních států. Naopak, ať se nám to líbí, nebo ne, jádro Linux je vystaveno aktivním útokům národních států, organizovaného zločinu a kdo, čeho ještě. Aspoň ohledně RCU přijmu veškerou pomoc, co to je půjde, i kdyby mě to mělo stát trochu práce navíc.

—Paul McKenney

Články

Stav realtime a vestavěného Linuxu: dvě sezení o tom, jak jsou na tom realtime a vestavěný Linux a co je potřeba dělat dál.
Podpora paměťového modelu TSO na CPU Arm: neshoda, jestli by jádro mělo zpřístupnit funkci některých procesorů Arm.
Šance Rustu v kodecích uvnitř jádra: jak může Rust zlepšit zabezpečení ovladačů médií s co nejmenším rozruchem.

Vydání z 9. 5. 2024

LWN.net Weekly Edition for May 9, 2024.

Stav vydání jádra

Kernel release status. Jonathan Corbet. 8. května 2024

Vývojové jádro 6.9-rc7 bylo vydáno 5. května. Linus Torvalds řekl: „Statistiky 6.9 nadále vypadají velmi normálně a nic nevypadá obzvláště znepokojivě.“

Stabilní aktualizace: 6.8.9, 6.6.30, 6.1.90, 5.15.158, 5.10.216, 5.4.275 a 4.19.313 byly všechny vydány 2. května.

Články

Zděditelná pověření deskriptorů souborů adresářů: návrh nové funkce pro sandboxing na úrovni jádra.
Struktura file_operations se zmenšuje: dvě z nejstarších zpětných volání v jádře by mohla být na odchodu.

Vydání z 16. 5. 2024

LWN.net Weekly Edition for May 16, 2024.

Stav vydání jádra

Kernel release status. Jonathan Corbet. 8. května 2024

Jádro 6.9 bylo vydáno 12. května. Linus řekl: „Takže 6.9 je teď venku a poslední týden vypadal docela stabilně (a celé vydání mi přišlo vcelku normální).“ Významné změny v tomto vydání zahrnují schopnost vytvářet pidfd pro jednotlivá vlákna, subsystém BPF arena, bezpečnostní mechanismus BPF token, podporu truncate() v io_uring, podporu jazyka Rust na 64bitových systémech Arm, vážené prokládání v subsystému správy paměti, cíl mapování zařízení virtual data optimizer, počáteční podporu FUSE passthrough a další.

Viz shrnutí začleňovacího okna (část první a druhá) na Linux Weekly News (a stránku KernelNewbies pro vydání 6.9) pro více podrobností.

Stabilní aktualizace: žádné nebyly vydány v posledním týdnu. Stabilní aktualizace 6.8.10, 6.6.31, 6.1.91, 5.15.159, 5.10.217, 5.4.276 a 4.19.314 byly revidovány a očekávány 16. května.

Citát týdne

Quote of the week. Jonathan Corbet. 15. května 2024

Ale upřímně, je to obrovské zlepšení. Jen jediná výhrůžka a jediný skrytý útok ad hominem. Žádné nadávky ani nepřímé urážky. 🙄 Takže jo, je to lepší, ale stále docela odpudivé pro většinu lidí. Nadále smutním za všechny ty vývojáře, jejichž zapojení se v komunitě se nikdy nedočkáme.

—Kees Cook

Články

Další pokus protlačit sched_ext: Rozšiřitelná třída plánovače představuje způsob, jak upravit plánovač jádra pomocí BPF, ale narazila na překážky.
Statistiky vývojového cyklu 6.9: Obvyklý pohled na vývojáře a firmy zapojené do vytváření jádra 6.9, a k tomu nová funkce pouze pro předplatitele Linux Weekly News.
Začátek reportáží ze Summitu o linuxových úložištích, souborových systémech, správě paměti a BPF (LSFMM+BPF)
- Stav stránky v roce 2024: Novinky v procesu převodu jádra na používání folií.
- Mnoho dalšího později…

Vydání ze 23. 5. 2024

LWN.net Weekly Edition for May 23, 2024.

Stav vydání jádra

Kernel release status. Jonathan Corbet. 22. května 2024

Začleňovací okno 6.10 bylo otevřené, uzavření bylo očekáváno 26. května.

Stabilní aktualizace: 6.9.1, 6.8.10, 6.6.31, 6.1.91, 5.15.159, 5.10.217, 5.4.276 a 4.19.314 byly vydány 17. května.

Bílá kniha: Dodavatelská jádra, chyby a stabilita

White paper: Vendor Kernels, Bugs and Stability. Jonathan Corbet. 17. května 2024

Ronnie Sahlberg, Jonathan Maple a Jeremy Allison z CiQ zveřejnili bílou knihu zabývající se opravami chyb, které souvisí s bezpečností, aplikovanými (nebo neaplikovanými) na jádro RHEL 8.x v průběhu času.

To znamená, že časem se bezpečnost jader RHEL stále více zhoršuje, jak je objevováno stále více problémů v kódu v upstream, které jsou potenciálně zneužitelné, ale stále méně oprav těchto známých chyb je portováno zpět do jader RHEL.

Po dosažení RHEL 8.7, praví teorie, je jádro stabilizované s odpovídajícími zlepšeními bezpečnosti. Ale stále máme přísun nově objevených chyb v upstreamu jádra, které se týkají RHEL 8.7 a nejsou řešeny. Každá menší verze upstreamu je vydána přibližně každé čtvrtletí a můžeme si všimnout, že přísun nových chyb v RHEL neřešených roste. Počet známých problémů v těchto jádrech se zvyšuje o přibližně 250 nových chyb za kvartál nebo i více.

Axboe: Co je nového u `io_uring` v 6.10

Axboe: What's new with io_uring in 6.10. Jonathan Corbet. 20. května 2024

Jens Axboe popisuje nové funkce io_uring, které budou součástí vydání jádra 6.10.

Balík je více bufferů použitých v jedné operaci. Na přijímající straně to znamená, že jedno přijetí může využít více bufferů, čímž se omezí zpáteční cesta síťovým stackem z N na N bufferů na jediný. Na straně odesílatele to umožňuje lepší nakládání s tím, jak aplikace řeší odesílání ze soketu, čímž se odstraní nutnost serializovat odesílání do jednoho soketu. Balíky fungují s poskytnutými buffery, tím pádem tato funkce také přidává podporu bufferů poskytovaných pro operace odesílání.

Články

První polovina začleňovacího okna 6.10: první sbírka změn, které si našly cestu do hlavní řady pro vydání 6.10.
GitLab CI pro jádro: návrh systému průběžné integrace pro celé jádro.
Mnoho reportáží ze Summitu o linuxových úložištích, souborových systémech, správě paměti a BPF 2024:
- Novinky a plány pro DAMON do budoucna: DAMON a DAMOS poskytují sadu nástrojů pro řízení pravidel opětovného používání paměti z uživatelského prostoru. Autor DAMON SeongJae Park skupině poskytl novinky o nedávném vývoji v tomto subsystému a mluvil o tom, kam míří dále.
- Rozšíření rozhraní mempolicy pro heterogenní systémy: jaderné API pro pravidla paměti nedrží krok se změnami hardwaru, jak to spravit?.
- Lepší podpora hierarchie lokálně připojené paměti: paměť CXL dává příslib výrazného šetření nákladů, ale pouze tehdy, pokud ji jádro dokáže řádně spravovat.
- Co je na řadě pro alokátor SLUB: současný a budoucí stav zbývajícího alokátoru objektů v jádře.
- Jak čelit šílenství mapcount: udržování čítače mapování stránek je záludnější, než by se mohlo zdát, ale situace se zlepšuje.
- Dynamické nastavení velikosti jaderného zásobníku: jaderné zásobníky jsou zároveň moc malé i moc velké, dát jim proměnlivou velikost by tento problém vyřešilo.
- Profilování alokace paměti v jádře: kdysi kontroverzní diskuze o této nové funkci mění zaměření na budoucí vylepšení.
- Další pokus o izolaci adresních prostorů: zmírnění hardwarových zranitelností nás stála hodně výkonu; izolace adresních prostorů nabízí ochranu před současnými i budoucími zranitelnostmi, přičemž by nám ten výkon vrátila.
- Rychlejší chyby stránek s průchody VMA chráněnými RCU: rychlejší metoda hledání ve stromu VMA.
- Vstříc sjednocení hugetlbfs: dalo by se říct, že subsystém hugetlbfs je zastaralá metoda přístupu k velkým stránkám, jež přidává zátěž údržbě správy paměti. Splynutí s ústředním kódem pomůže, ale nebude to snadné.
- Začlenění msharefs: tento návrh umožnit sdílení tabulek stránek mezi procesy už je nějakou dobu zvažován; co je potřeba, aby se dostal do upstreamu?
- Výbor pro dokumentaci příznaků stránek: pokus o autorskou spolupráci ve velkém měřítku.
- Dvě sezení o paměti CXL: Compute Express Link je propagován jako přínos pro výpočetní datová centra; dvě seance se zaobíraly tím, jak jádro může tuto funkcionalitu podporovat.
- Cesta ke zbavení se SPARSEMEM: jádro má několik způsobů reprezentace fyzické paměti, jeden z nich by mohl být na odchodu.
- Plán, jak učinit kfunc BPF polymorfními: návrh, který by kfunc umožnil používat různé implementace podle toho, odkud a jak jsou volány.
- Plánování virtuálních strojů pomocí BPF: přednáška o řešení problému „dvojitého plánování“ ve virtuálních strojích.
- Interakce mezi opětovným používáním paměti a RCU: proces opětovného používání paměti lze urychlit použitím mechanismu read-copy-update, který se vyhýbá zamykání, ale stále je potřeba dořešit několik problémů.
- Podpora větších velikostí bloků v souborových systémech: další diskuze o tom, co je potřeba udělat v souborových systémech, aby mohly podporovat bloky velikostí přes 4 KB.

Vydání ze 30. 5. 2024

LWN.net Weekly Edition for May 30, 2024.

Stav vydání jádra

Kernel release status. Jonathan Corbet. 29. května 2024

Vývojové jádro 6.9-rc1 bylo vydáno 26. května. Z nevyřčených důvodů bylo kódové označení vydání změněno na „Baby Opossum Posse“. Pro přehled změn začleněných do 6.10 viz shrnutí začleňovacího okna na Linux Weekly News (část první, část druhá).

Stabilní aktualizace: 6.9.2, 6.8.11, 6.6.32, 6.1.92, 5.15.160, 5.10.218, 5.4.277 a 4.19.315 byly všechny vydány 25. května.

Stabilní aktualizace 6.9.3 a 6.8.12 byly revidovány a očekávány každou chvíli. (Vydány byly 30. května.)

BitKeeper, Linux a licenční spory: Jak Linus napsal Git za 14 dní (blog Graphite)

BitKeeper, Linux, and licensing disputes: How Linus wrote Git in 14 days (Graphite blog). Jonathan Corbet. 24. května 2024

Tento zápisek na blogu Graphite převypravuje historii fiaska s BitKeeperem a úsvitu éry Gitu.

Když se řekne historie, často si ji romantizujeme jako zrozenou z náhlého vnuknutí. Ale vznik gitu ukazuje mnohem drsnější okolnosti vynálezu: pomalu se stupňující neshody ohledně licence, nutnost útržkovitého záložního řešení, aby se odblokovala práce, a pak pokračování ve zdokonalování a iteracích v průběhu dlouhých let, vedené nikoli vynálezcem, nýbrž komunitou.

Ti, kteří u toho tehdy nebyli, by mohli mít zájem pročíst si texty z Linux Weekly News včetně:

První zmínka o BitKeeperu v říjnu 1998
Ne tak docela open source, 1999
Linus zkouší BitKeeper, 2002
Komunita svobodného softwaru a proprietární balíčky, 2002
Jádro a BitKeeper se loučí, 2005
Jak Tridge použil reverzní inženýrství na BitKeeper, 2005
Vnitřnosti Gitu, 2005

…a mnoho dalšího, kde má zájem to pohledat.

Citát týdne

Quote of the week. Jonathan Corbet. 29. května 2024

Celé to „jeden krok vpřed, dva kroky zpět“ je v naprostém pořádku, pokud děláte line dance.

Ale my neděláme line dance.

Postupujeme pomalu a vytrvale a pokud něco nedokážete opravit, aniž byste rozbili něco jiného, pak to prostě zůstane neopravené.

—Linus Torvalds

Články

Zbytek začleňovacího okna 6.10: co dalšího bylo začleněno pro nadcházející vydání jádra 6.10.
Pokračování reportáží ze Summitu o linuxových úložištích, souborových systémech, správě paměti a BPF 2024:
- Atomické zápisy bez trhání: diskuze o tom, jak podporovat 16KB zápisy s bufferovaným I/O s ochranou před roztrhnutými (částečnými) zápisy.
- Souborové systémy a iomap: převod různých souborových systémů, aby používaly iomap, probíhá; co jsou zbývající problémy, které je potřeba vyřešit?
- Co je naplánováno pro sched_ext: sched_ext za poslední rok urazil velký kus cesty. Co se změnilo a co je stále potřeba, aby toto dílo bylo smysluplně hotové?
- Nedávná vylepšení mechanismu BPF struct_ops: podpora obecnějších jaderných rozhraní v BPF se dále vyvíjí.
- Vylepšení LLVM pro verifikaci BPF: co mohou udělat vývojáři překladačů, aby zajistili, že jejich překladače produkují verifikovatelný kód?
- Podpora BPF v GCC: GCC nyní umí překládat mnoho kódu BPF. Co k tomu bylo potřeba a jaké je další směřování projektu?
- Nová abstrakční vrstva pro swap v jádře: redesign swappovací vrstvy pro lepší výkon, obzvláště s velkými folii.
- Podpora velkých folií pro shmem a tmpfs: vylepšení jaderných mechanismů sdílené paměti velkými folii.
- Soumrak řízení paměti verze 1: 1. verze API řídících skupin byla překonána před lety, ale uživatelé starého rozhraní řízení paměti stále jsou. Jak je přesvědčit, aby povýšili, a tento starý kód mohl být odstraněn?
- Optimalizace alokátoru pro transparentní velké stránky: navrhované změny správy paměti, které by zvýšily pravděpodobnost úspěšné alokace velkých stránek.
- Dvě přednášky o výkonu stransparentních velkých stránek více různých velikostí: transparentní velké stránky více různých velikostí jsou považovány za výkonnostní výhodu, ale kolik jimi systém skutečně získá?
- Příští kroky ve stromové struktuře javor: nadcházející vlastnosti plánované pro tuto poměrně novou datovou strukturu v jádře.
- Konkretizace deskriptorů paměti: první pohled, jak by mohla vypadat budoucnost deskriptorů paměti.
- Stav komunity správy paměti v roce 2024: tradiční seance s Andrewem Mortonem, kde se diskutuje, jak jde vývoj správy paměti.
- Měření fragmentace paměti: pokus přijít na způsob měření, jak hrozně je paměť fragmentovaná.