Nakon dva meseca razvoja, Linus Torvalds predstavio je verziju jezgra Linux 5.18. Među najistaknutijim promenama su: izvršena je velika čišćenje zastarele funkcionalnosti, dat je status zastare za sistem datoteka Reiserfs, implementirani su događaji praćenja korisničkih procesa, dodata je podrška za mehanizam blokiranja akcija exploit-a Intel IBT, uključen je režim otkrivanja prelivanja bafera prilikom korišćenja funkcije memcpy(), dodan je mehanizam praćenja poziva funkcija fprobe, poboljšana je efikasnost planera zadataka na CPU AMD Zen, uključeni su drajveri za upravljanje funkcionalnošću CPU-a Intel (SDS), integrisani su delovi zakrpa za restrukturiranje zaglavlja, odobren je standard C11.
U novu verziju uključeno je 16206 ispravki od 2127 programera (u prethodnom izdanju bilo je 14203 ispravki od 1995 programera), veličina zakrpe je 108 MB (promene su obuhvatile 14235 datoteka, dodano je 1340982 linija koda, obrisano 593836 linija). Otprilike 44% svih predstavljenih promena u 5.18 povezano je sa drajverima uređaja, oko 16% promena tiče se ažuriranja koda specifičnog za hardverske arhitekture, 11% se odnosi na mrežne stekove, 3% na sisteme datoteka i 3% na unutrašnje pod-sisteme jezgra.
Najvažnija poboljšanja u jezgru 5.18:
- Diskovni sustav, ulaz/izlaz i datotečni sustavi
- U sistemu datoteka Btrfs dodata je podrška za prosleđivanje komprimovanih podataka prilikom izvršavanja operacija send i receive. Ranije, kada se koristio send/receive, strana koja šalje je dekomprimovala podatke skladištene u komprimovanom obliku, dok je primao ponovo komprimovao pre nego što ih napiše. U jezgru 5.18 aplikacijama u korisničkom prostoru, koristeći pozive send/receive, omogućeno je slanje komprimovanih podataka bez ponovnog pakovanja. Ova funkcionalnost je implementirana kroz nove ioctl operacije BTRFS_IOC_ENCODED_READ i BTRFS_IOC_ENCODED_WRITE, koje omogućavaju direktno čitanje i pisanje informacija u ekstente.
Pored toga, u Btrfs je povećana efikasnost fsync-a. Dodana je mogućnost deduplifikacije i izvođenja reflink (kloniranje metapodataka datoteke uz stvaranje veze na već postojeće podatke bez njihovog stvarnog kopiranja) za celo skladište, ne ograničavajući se na tačke montiranja.
- U režimu izravnog unosa/izlaza (Direct I/O) omogućen je pristup šifriranim datotekama prilikom korištenja fscrypt inline šifriranja, u kojem operacije šifriranja i dešifriranja obavlja kontroler uređaja, a ne jezgra. Prilikom uobičajenog šifriranja uz pomoć jezgre, pristup zašifriranim datotekama putem Direct I/O i dalje nije moguć, jer se pristupa datotekama mimo mehanizma međuspremnika u jezgri.
- Na NFS poslužitelju, podrška za protokol NFSv3 je prema zadanim postavkama omogućena, što sada ne zahtijeva posebno uključivanje i dostupna je uz opće uključivanje NFS-a. NFSv3 se smatra osnovnom i uvijek podržavanom verzijom NFS-a, a podrška za NFSv2 može biti ukinuta u budućnosti. Znatno je poboljšana učinkovitost čitanja sadržaja direktorija.
- Datotečni sustav ReiserFS prebačen je u kategoriju zastarjelih i očekuje se njegovo uklanjanje 2025. godine. Prebacivanje ReiserFS u kategoriju zastarjelih će smanjiti radne troškove za održavanje zajedničkih promjena vezanih uz podršku novog API-ja za montiranje, iomap i folijante.
- Za F2FS realizirana je mogućnost mapiranja identifikatora korisnika montiranih datotečnih sustava, koja se koristi za usklađivanje datoteka određenog korisnika na montiranom tuđem dijelu s drugim korisnikom u trenutnom sustavu.
- Preuređen je kod za izračunavanje statistike u uređivačima Device-mapper, što je omogućilo značajna poboljšanja u točnosti obračuna u takvim uređivačima poput dm-crypt.
- Za NVMe uređaje implementirana je podrška za 64-bitne kontrolne zbrojeve za provjeru cjelovitosti.
- Za datotečni sustav exfat predložena je nova opcija montiranja 'keep_last_dots', koja zabranjuje brisanje točaka na kraju imena datoteke (u Windowsu se točke na kraju imena prema zadanim postavkama brišu).
- U EXT4 poboljšana je učinkovitost režima fast_commit i povećana skalabilnost. Opcija montiranja 'mb_optimize_scan', koja omogućuje poboljšanje performansi u uvjetima velike fragmentacije FС-a, prilagođena je za rad s datotekama s ekstentima.
- Podrška za write stream je obustavljena u podsistemu koji omogućava rad blokovnih uređaja. Ova funkcionalnost je bila predložena za SSD, ali nije se proširila i trenutno ne postoje uređaji koji podržavaju ovaj režim, a malo je verovatno da će se oni pojaviti u budućnosti.
- U sistemu datoteka Btrfs dodata je podrška za prosleđivanje komprimovanih podataka prilikom izvršavanja operacija send i receive. Ranije, kada se koristio send/receive, strana koja šalje je dekomprimovala podatke skladištene u komprimovanom obliku, dok je primao ponovo komprimovao pre nego što ih napiše. U jezgru 5.18 aplikacijama u korisničkom prostoru, koristeći pozive send/receive, omogućeno je slanje komprimovanih podataka bez ponovnog pakovanja. Ova funkcionalnost je implementirana kroz nove ioctl operacije BTRFS_IOC_ENCODED_READ i BTRFS_IOC_ENCODED_WRITE, koje omogućavaju direktno čitanje i pisanje informacija u ekstente.
- Memorija i sistemske usluge
- Započeta je integracija skupa zakrpa koje značajno smanjuju vreme ponovne izgradnje jezgra putem restrukturiranja hijerarhije zaglavlja i smanjenja broja međuzavisnosti. Zakrpe koje optimizuju strukturu zaglavlja planera zadataka uključene su u jezgrovnu verziju 5.18. U poređenju sa prethodnim izdanjem, potrošnja procesorskog vremena pri izgradnji koda kernel/sched smanjena je za 61%, dok je stvarno vreme smanjeno za 3,9% (sa 2,95 na 2,84 sekunde).
- U jezgru je odobreno korišćenje C11 standarda objavljenog 2011. godine. Pre toga, dodati kod u jezgro morao je biti usklađen sa ANSI C (C89) specifikacijom formiranom 1989. godine. U skriptama za izgradnju jezgra 5.18, opcija ‘—std=gnu89’ zamenjena je sa ‘—std=gnu11 -Wno-shift-negative-value’. Razmatrana je mogućnost korišćenja C17 standarda, ali bi to zahtevalo povećanje minimalno podržane verzije GCC-a; podrška za C11 se uklapa u trenutne zahteve za verziju GCC-a (5.1).
- Poboljšana je efikasnost planiranja zadataka na AMD procesorima sa Zen mikroarkitekturom, gde se za svaki čvor sa lokalnim memorijskim kanalima obezbeđuje više poslednjih nivoa keša (LLC, Last Level Cache). U novoj verziji uklonjen je disbalans LLC između NUMA čvorova, što je dovelo do značajnog povećanja performansi pod određenim opterećenjima.
- Proširena su sredstva za praćenje aplikacija u korisničkom prostoru. U novoj verziji jezgra dodata je mogućnost kreiranja događaja praćenja od strane korisničkih procesa i snimanja podataka u baferu praćenja, koji se mogu pregledati putem tipičnih alata za praćenje jezgra kao što su ftrace i perf. Događaji praćenja iz korisničkog prostora su izolovani od događaja praćenja jezgra. Status događaja može se pregledati putem datoteke /sys/kernel/debug/tracing/user_events_status, a registracija događaja i snimanje podataka putem datoteke /sys/kernel/debug/tracing/user_events_data.
- Dodana je mehanizma praćenja poziva funkcija — fprobe. API fprobe se zasniva na ftrace-u, ali je ograničen samo na mogućnost dodavanja callback handler-a na tačke ulaza u funkciju i završetka funkcije. Za razliku od kprobes i kretprobes, novi mehanizam omogućava korišćenje jedne obrade za više funkcija.
- Obustavljena je podrška za starije ARM procesore (ARMv4 i ARMv5) koji nisu opremljeni jedinicom za upravljanje memorijom (MMU). Podrška za ARMv7-M sisteme bez MMU je zadržana.
- Obustavljena je podrška za RISC-sličnu arhitekturu NDS32, koja se koristila u procesorima kompanije Andes Technologies. Kod je uklonjen zbog nedostatka podrške i nepopularnosti NDS32 podrške u glavnoj Linux jezgri (preostali korisnici koriste specijalizovane verzije jezgre od proizvođača opreme).
- Zadano je isključena izgradnja jezgre sa podrškom za format izvršnih datoteka a.out za arhitekture alpha i m68k, u kojima se ovaj format još koristi. Verovatno će podrška zastarelog formata a.out uskoro biti potpuno uklonjena iz jezgre. Planovi za uklanjanje formata a.out raspravljaju se od 2019. godine.
- Za PA-RISC arhitekturu implementirana je minimalna podrška za mehanizam vDSO (virtual dynamic shared objects), koji pruža ograničen skup sistemskih poziva dostupnih u korisničkom prostoru bez prebacivanja konteksta. Podrška vDSO omogućila je dostupnost pokretanja sa neizvršivim stekom.
- Dodana je podrška za mehanizam Intel HFI (Hardware Feedback Interface), koji omogućava hardveru da šalje jezgru podatke o trenutnoj performansi i energetskoj efikasnosti svakog CPU-a.
- Dodavac je drajver za mehanizam Intel SDSi (Software-Defined Silicon), koji omogućava upravljanje aktiviranjem dodatnih funkcija u procesoru (na primer, specijalizovane instrukcije i dodatna keš memorija). Ideja je da se čipovi sa blokiranim naprednim funkcijama mogu isporučiti po nižoj ceni, a zatim se mogu "odomiti" i aktivirati dodatne opcije bez fizičke zamene čipa.
- Dodana je amd_hsmp drajver podrške za AMD HSMP (Host System Management Port) interfejs, koji pruža pristup funkcijama upravljanja procesorom putem specijalnih registara, koji su se pojavili u server procesorima AMD EPYC počevši od generacije Fam19h. Na primer, preko HSMP se mogu dobiti podaci o potrošnji energije i temperaturi, postaviti ograničenja na frekvenciju, aktivirati različite režime povećanja performansi i upravljati parametrima rada memorije.
- U interfejsu asinhronog ulaza/izlaza io_uring implementirana je opcija IORING_SETUP_SUBMIT_ALL za registraciju skupa deskriptora fajlova u ring buferu, kao i operacija IORING_OP_MSG_RING, koja omogućava slanje signala iz jednog ring bufera u drugi.
- U mehanizmu DAMOS (Data Access Monitoring-based Operation Schemes), koji omogućava oslobađanje memorije uzimajući u obzir učestalost pristupa memoriji, proširene su mogućnosti kontrole nad operacijama sa memorijom iz korisničkog prostora.
- Integrisana je treća serija zakrpa sa realizacijom koncepta folija stranica memorije (page folios), koje podsećaju na spojene stranice memorije (compound pages), ali se razlikuju poboljšanom semantikom i jasnijom organizacijom rada. Korišćenje folija omogućava ubrzanje upravljanja memorijom u nekim podsystemima jezgra. U predloženim zakrpama izvršen je prelazak na folije unutrašnjih funkcija upravljanja memorijom, uključujući varijante funkcije get_user_pages(). Pružena je podrška za kreiranje velikih folija u kodu unapred čitanja podataka.
- U sistemu izgradnje pojavila se podrška za promenljive okruženja USERCFLAGS i USERLDFLAGS, pomoću kojih se mogu preneti dodatne opcije kompajleru i linkeru.
- U eBPF podsystemu u mehanizmu BTF (BPF Type Format), koji pruža informacije za proveru tipova u BPF pseudo kodu, omogućeno je dodavanje anotacija varijablama koje se odnose na oblasti memorije u korisničkom prostoru. Anotacije pomažu sistemu verifikacije BPF koda da kvalitetnije identifikuje i proverava pristupe memoriji.
- Predložena je nova obrada alokacije memorije za skladištenje učitanih BPF programa, koja omogućava efikasnije korišćenje memorije u situacijama učitavanja velikog broja BPF programa.
- U sistemski poziv madvise(), koji pruža sredstva za optimizaciju upravljanja memorijom procesa, dodat je flag MADV_DONTNEED_LOCKED, koji dopunjava već postojeći flag MADV_DONTNEED, putem kojeg se jezgru može unaprijed javiti o namjeravanom oslobađanju bloka memorije, tj. da taj blok više nije potreban i da se može koristiti od strane jezgra. Za razliku od MADV_DONTNEED, korišćenje flag-a MADV_DONTNEED_LOCKED je dopušteno za fiksne stranice memorije u RAM-u, koje se pri pozivu madvise zamjenjuju bez promjene svog fiksnog statusa i u slučaju kasnijeg pristupa bloku i generisanja „page fault“ vraćaju se uz očuvanje vezanosti. Dodatno, uvedena je izmjena koja omogućava korišćenje flag-a MADV_DONTNEED sa velikim stranicama memorije u HugeTLB.
- Virtualizacija i sigurnost
- Za arhitekturu x86 dodana je podrška za mehanizam zaštite toka izvršavanja komandi Intel IBT (Indirect Branch Tracking), koji ometa primjenu tehnika izrade eksploita korišćenjem praksi povratnog orijentisanog programiranja (ROP, Return-Oriented Programming), gdje se eksploit formira u obliku lanca poziva već postojećih u memoriji delova mašinskih instrukcija, koji se završavaju instrukcijom povratka kontrole (što je obično na kraju funkcija). Suština primenjenog metoda zaštite je blokiranje indirektnih prelaza u telo funkcije dodavanjem specijalne instrukcije ENDBR na početku funkcije i odobravanjem izvršenja preko indirektnog prelaza samo u slučaju prelaza na ovu instrukciju (indirektni poziv preko JMP i CALL mora uvijek doći na instrukciju ENDBR, koja je smeštena na samom početku funkcije).
- Uključena je strožija provera granica bafera u funkcijama memcpy(), memmove() i memset(), koja se vrši u fazi kompajliranja kada je uključen režim CONFIG_FORTIFY_SOURCE. Dodatna izmjena se svodi na provjeru izlaska van granica elemenata struktura čija je veličina poznata. Ističe se da bi realizovana mogućnost mogla blokirati sve povezane sa memcpy() prelivanja bafera u jezgru, identificirana bar u poslednje tri godine.
- Dodana je druga verzija koda ažurirane implementacije generatora pseudo-slučajnih brojeva RDRAND, koja je odgovorna za rad uređaja /dev/random i /dev/urandom. Nova implementacija je primjetna zbog unifikacije rada /dev/random i /dev/urandom, dodavanja zaštite od pojave duplikata u protoku slučajnih brojeva prilikom pokretanja. virtualnih mašina i prelaskom na korištenje hash funkcije BLAKE2s umjesto SHA1 za operacije miješanja entropije. Ova promjena je poboljšala sigurnost generatora pseudo-slučajnih brojeva eliminacijom problematičnog algoritma SHA1 i isključivanjem prepisivanja inicijalizacijskog vektora RNG-a. Budući da algoritam BLAKE2s nadmašuje SHA1 po performansama, njegova primjena je također pozitivno utjecala na performanse.
- Za ARM64 arhitekturu dodana je podrška za novi algoritam autentifikacije pokazivača — „QARMA3“, koji je brži od algoritma QARMA uz zadržavanje potrebnog nivoa zaštite. Tehnologija omogućava korištenje specijalizovanih ARM64 instrukcija za provjeru adresa povratka uz pomoć digitalnih potpisâ koje se čuvaju u neiskorištenim gornjim bitovima samog pokazivača.
- Za ARM64 arhitekturu implementirana je podrška za uključivanje zaštite protiv prepisivanja adrese povratka iz funkcije u slučaju prelivanja bafera u steku u GCC 12. Suština zaštite je u čuvanju adrese povratka nakon omogućavanja kontrole funkcije u posebnom „sjeničkom“ steku i izvlačenju te adrese prije izlaska iz funkcije.
- Dodano je novo skladište ključeva (keyring) — „machine“, koje sadrži ključeve vlasnika sistema (MOK, Machine Owner Keys), podržane u shim-bootloaderu. Ti ključevi se mogu koristiti za potvrdu digitalnog potpisa komponenti jezgre, koje se učitavaju u fazi nakon inicijalnog pokretanja (na primjer, modula jezgre).
- Uklonjena je podrška za asimetrične privatne ključeve za TPM, koji su ponuđeni u zastarjeloj verziji TPM, imaju poznate sigurnosne probleme i nisu se široko primjenjivali u praksi.
- Dodana je zaštita podataka tipa size_t od cjelobrojnih prelivanja. U kodu su uključeni obrtnici size_mul(), size_add() i size_sub(), koji omogućavaju sigurno množenje, sabiranje i oduzimanje veličina sa tipom size_t.
- Pri sastavljanju jezgra uključeni su signali „-Warray-bounds” i „-Wzero-length-bounds”, koji prikazuju upozorenja kada indeks izađe van granica niza ili se koriste nizovi nulte dužine.
- U virtio-crypto uređaj dodana je podrška za šifriranje koristeći RSA algoritam.
- Mrežni podosistem
- U implementaciju mrežnih mostova dodana je podrška za režim zaključavanja portova (locked mode), gde korisnik može slati saobraćaj kroz port samo sa dozvoljenom MAC adresom. Takođe je dodana mogućnost korišćenja više struktura za procenu stanja STP protokola (Spanning Tree Protocol). Ranije je za VLAN mogla da se vrši samo direktna veza sa STP-om (1:1), gde se svaki VLAN upravljao nezavisno. U novoj verziji dodat je parametar mst_enable, pri čemu se stanje VLAN-ova kontroliše putem MST modula (Multiple Spanning Trees) i veza VLAN-ova može odgovarati M:N modelu.
- Nastavlja se rad na integraciji u mrežni stek alata za praćenje uzroka odbacivanja paketa (kodi razloga). Kod razloga se prenosi tokom oslobađanja memorije vezane za paket, što omogućava praćenje situacija poput odbacivanja paketa zbog grešaka u ispunjavanju polja u zaglavlju, otkrivanje spoofinga kroz rp_filter, netačna kontrolna suma, nedostatak memorije, aktiviranje IPSec XFRM pravila, netačni TCP broj sekvence itd.
- Omogućena je mogućnost prenosa mrežnih paketa iz BPF programa pokrenutih iz prostor korisnika u režimu BPF_PROG_RUN, pri čemu se BPF programi izvršavaju u jezgru, ali vraćaju rezultate u prostor korisnika. Paketi se prenose korišćenjem XDP (eXpress Data Path) podsistema. Podržava se live-režim obrade paketa, u kojem XDP handler može u hodu preusmeravati mrežne pakete u mrežni stek ili na druge uređaje. Takođe, moguće je kreirati programske generatore spoljnog saobraćaja ili umetati mrežne okvire u mrežni stek.
- Za BPF programe koji se pričvršćuju za mrežne cgroups ponuđene su pomoćne funkcije za eksplicitno postavljanje vrednosti koju vraćaju sistemski pozivi, što omogućava prenosenje potpunijih informacija o uzrocima blokiranja sistemskog poziva.
- U XDP (eXpress Data Path) podsistem dodata je podrška za fragmentirane pakete smeštene u više bafera, što omogućava obradu Jumbo-okvira i primenu TSO/GRO (TCP Segmentation Offload/Generic Receive Offload) za XDP_REDIRECT.
- Proces brisanja mrežnih prostora imena značajno je ubrzan, što je bilo potrebno na nekim velikim sistemima sa velikim obimom saobraćaja.
- Oprema
- U amdgpu drajveru je unaprijed uključena tehnologija adaptivne sinkronizacije FreeSync, koja omogućava podešavanje frekvencije osvježavanja na ekranu, obezbjeđujući glatkoću i izostanak prekida tokom igranja i gledanja video zapisa. Stabilna podrška za GPU Aldebaran je objavljena.
- U i915 drajveru je dodana podrška za Intel Alderlake N čipove i diskretne grafičke kartice Intel DG2-G12 (Arc Alchemist).
- U nouveau drajveru je obezbijeđena podrška za više bitrate-ova za DP/eDP interfejse i podrška za produživače kablova lttprs (Link-Training Tunable PHY Repeaters).
- U drm (Direct Rendering Manager) podsistemu, u drajverima armada, exynos, gma500, hyperv, imx, ingenic, mcde, mediatek, msm, omap, rcar-du, rockchip, sprd, sti, tegra, tilcdc, xen i vc4, dodana je podrška za parametar nomodeset, koji omogućava onemogućavanje prebacivanja video režima na nivou jezgra i korišćenje sredstava za hardversko ubrzanje renderovanja, ostavljajući samo funkcionalnost povezanih sa sistemskim framebuferom.
- Dodana je podrška za ARM SoC Qualcomm Snapdragon 625/632 (koristi se u pametnim telefonima LG Nexus 5X i Fairphone FP3), Samsung Exynos 850, Samsung Exynos 7885 (koristi se u Samsung Galaxy A8), Airoha (Mediatek/EcoNet) EN7523, Mediatek mt6582 (tablet Prestigio PMT5008 3G), Microchip Lan966, Renesas RZ/G2LC, RZ/V2L, Tesla FSD, TI K3/AM62 i i.MXRTxxxx.
- Dodana je podrška za ARM uređaje i ploče Broadcom (Raspberry Pi Zero 2 W), Qualcomm (Google Herobrine R1 Chromebook, SHIFT6mq, Samsung Galaxy Book2), Rockchip (Pine64 PineNote, Bananapi-R2-Pro, STM32 Emtrion emSBS, Samsung Galaxy Tab S, Prestigio PMT5008 3G tablet), Allwinner (A20-Marsboard), Amlogic (Amediatek X96-AIR, CYX A95XF3-AIR, Haochuangy H96-Max, Amlogic AQ222 i OSMC Vero 4K+), Aspeed (Quanta S6Q, ASRock ROMED8HM3), Marvell MVEBU/Armada (Ctera C200 V1 i V2 NAS), Mstar (DongShanPiOne, Miyoo Mini), NXP i.MX (Protonic PRT8MM, emCON-MX8M Mini, Toradex Verdin, Gateworks GW7903).
- Dodana je podrška za audio sisteme i kodeke AMD PDM, Atmel PDMC, Awinic AW8738, i.MX TLV320AIC31xx, Intel CS35L41, ESSX8336, Mediatek MT8181, nVidia Tegra234, Qualcomm SC7280, Renesas RZ/V2L, Texas Instruments TAS585M. Dodana je početna implementacija audio drajvera za DSP čip Intel AVS. Ažurirana je podrška za drajvere za Intel ADL i Tegra234, kao i izvršene promjene za poboljšanje podrške zvuka na uređajima Dell, HP, Lenovo, ASUS, Samsung i Clevo.
Istovremeno, latinoamerička Fondacija za slobodni softver je formirala potpuno slobodnu verziju jezgra 5.18 — Linux-libre 5.18-gnu, očišćenog od elemenata firmvera i drajvera koji sadrže neslobodne komponente ili delove koda čija je upotreba ograničena od strane proizvođača. U novom izdanju izvršena je čišćenje drajvera za MIPI DBI panele, VPU Amphion, WiFi MediaTek MT7986 WMAC, Mediatek MT7921U (USB) i Realtek 8852a/8852c, zvučne čipove Intel AVS i Texas Instruments TAS5805M. Takođe je izvršena čišćenje DTS datoteka za različite SoC Qualcomm sa procesorima zasnovanim na arhitekturi AArch64. Ažuriran je kod čišćenja blobova u drajverima i podsistemima AMD GPU, MediaTek MT7915, Silicon Labs WF200+ WiFi, Mellanox Spectru Ethernet, Realtek rtw8852c, Qualcomm Q6V5, Wolfson ADSP, MediaTek HCI UART.
Izvor: opennet.ru
