Objavljivanje Linux jezgra 5.7

Nakon dva mjeseca razvoja, Linus Torvalds predstavio objavio je jezgro Linux 5.7Među najistaknutijim promenama su: nova implementacija FС exFAT, bareudp modul za kreiranje UDP tunela, zaštita zasnovana na autentifikaciji pokazivača za ARM64, mogućnost povezivanja BPF programa sa LSM handlerima, nova implementacija Curve25519, split-lock detektor, BPF kompatibilnost sa PREEMPT_RT, ukidanje ograničenja od 80 karaktera po redu u kodu, uzimanje u obzir temperatura CPU u rasporedu zadatka, mogućnost korišćenja clone() za kreiranje procesa u drugom cgroupu, zaštita od pisanja u memoriju putem userfaultfd.

Sadašnja verzija sadrži 15033 ispravki od 1961 programera,
veličina patch-a je 39 MB (promene su obuhvatile 11590 datoteka, dodato 570560 linija koda,
uklonjeno 297401 linija). Približno 41% svih predstavljenih promena u 5.7
se odnosi na drajvere uređaja, oko 16% promena ima
veze sa ažuriranjem koda specifičnog za hardverske arhitekture, 13%
se odnosi na mrežni stek, 4% — na datotečne sisteme i 4% na unutrašnje.
pod sisteme jezgra.

Osnovne novine:

  • Diskovni sustav, ulaz/izlaz i datotečni sustavi
    • Dodata je nova implementacija exFAT drajvera, koja se bazira na aktuelnoj kod bazi 'sdfat' (2.x), koju razvija kompanija Samsung za svoje Android pametne telefone. Ranije dodat drajver u kernel zasniva se na zastarjelom kodu Samsunga (verzija 1.2.9) i zaostajao je po performansama u odnosu na novi drajver za otprilike 10%. Podsećamo da je dodavanje podrške za exFAT u kernel postalo moguće nakon što je kompanija Microsoft je objavila objavila javne specifikacije i omogućila besplatnu upotrebu patenata na exFAT u Linuxu.
    • U Btrfs je implementirana nova ioctl() komanda — BTRFS_IOC_SNAP_DESTROY_V2, koja omogućava brisanje poddirektorija po njegovom identifikatoru. Obezbeđena je potpuna podrška za kloniranje inline ekstentata. Proširen je broj tačaka za vraćanje operacija redistribucije, što je omogućilo smanjenje dugog čekanja prilikom izvršavanja komande 'balance cancel'. Ubrzano je određivanje povratnih referenci na ekstente (na primer, vreme izvršenja testnog scenarija smanjeno je sa sat vremena na nekoliko minuta). Dodana je mogućnost povezivanja sa svakim inode-om stabla ekstenta datoteke. Preuređena je shema zaključavanja koja se koristi prilikom pisanja u poddirektorije i pri isključenju NOCOW. Povećana je efikasnost izvršavanja fsync za opsege.
    • U XFS poboljšana je provjera metapodataka i izvođenje fsck za aktivne particije. Predložena je biblioteka za rekonstrukciju btree struktura, koja će se u budućnosti koristiti za prepravku xfs_repair i implementaciju mogućnosti oporavka bez odmontiranja particije.
    • U CIFS je dodana eksperimentalna podrška za postavljanje swap particije u SMB3 skladištima. Implementirane su POSIX ekstenzije u readdir, definirane u specifikaciji SMB3.1.1. Povećane su performanse pisanja za stranice veličine 64KB kada je uključen režim cache=strict i korištene verzije protokola 2.1+.
    • FS EXT4 je prebačen sa bmap i iopoll na korištenje iomap.
    • U F2FS je implementirana opcionalna podrška za kompresiju podataka korištenjem algoritma zstd. Po defaultu za kompresiju se koristi algoritam LZ4. Dodana je podrška za komandu „chattr -c commit“. Osigurano je prikazivanje vremena montiranja. Dodan ioctl F2FS_IOC_GET_COMPRESS_BLOCKS za dobivanje informacija o broju komprimiranih blokova. Dodati su podaci o kompresiji, koji se prikazuju putem statx.
    • U datotečnom sistemu Ceph dodana je mogućnost lokalnog izvršavanja operacija kreiranja i brisanja (unlink) datoteka bez čekanja odgovora od servera (rad u asinkronom režimu). Ova promjena, na primjer, omogućava značajno povećanje performansi prilikom korištenja alata rsync.
    • U OVERLAYFS dodana je mogućnost korištenja virtiofs kao gornjeg nivoa FS.
    • Prepisan kod za pretraživanje putanja u VFS, preuređen kod za parsiranje simboličkih linkova i unificirano pretraživanje tačaka montaže.
    • U subsistemu scsi, neprivilegiranim korisnicima dozvoljeno je omogućeno je izvođenje komandi ZBC.
    • U dm_writecache implementirano je dodana je mogućnost postupnog čišćenja keša na osnovu parametra max_age, koji određuje maksimalno vrijeme trajanja bloka.
    • U dm_integrity dodata dodana je podrška za operaciju „discard“.
    • U null_blk dodata dodana je podrška za simulaciju grešaka za simulaciju kvarova tokom testiranja.
    • Dodana je omogućeno je slanje udev obavještenja o promjeni veličine blok uređaja.
  • Mrežni podosistem
    • U Netfilteru uključeni su promene, što značajno ubrzava obradu velikih lista usklađivanja (nftables set), u kojima je potrebna provjera kombinacije podmreža, mrežnih portova, protokola i MAC adresa.
      Optimizacije uneseni U modulu nft_set_pipapo (PIle PAcket POlicies), koji rešava problem usklađivanja sadržaja paketa sa primenjenim pravilima filtracije kroz proizvoljne raspon stanje polja, kao što su IP rasponi i mrežni portovi (nft_set_rbtree i nft_set_hash manipulišu usklađivanjem intervala i direktnim reflektovanjem vrednosti). Vektorizovana verzija pipapo korišćenjem 256-bitnih instrukcija AVX2 na sistemu sa procesorom AMD Epyc 7402 pokazala je povećanje performansi od 420% prilikom analize 30 hiljada zapisa koji uključuju parove port-protokol. Povećanje prilikom usklađivanja para iz podmreže i broja porta prilikom analize 1000 zapisa iznosilo je 87% za IPv4 i 128% za IPv6.
    • Dodato Modul bareudp, koji omogućava enkapsulaciju različitih L3 protokola u UDP tunel, kao što su MPLS, IP i NSH.
    • Nastavljena je integracija MPTCP (MultiPath TCP) komponenti, proširenja TCP protokola koje omogućava rad TCP veze sa isporukom paketa istovremeno putem nekoliko ruta preko različitih mrežnih interfejsa, povezanih sa različitim IP adresama.
    • Dodana je Podrška za mehanizme hardverske akceleracije enkapsulacije Ethernet okvira u 802.11 (Wi-Fi).
    • Prilikom premeštanja uređaja iz jednog prostora imena mrežne podsystems (network namespace) u drugi, pravilno su podešena prava pristupa i vlasnika odgovarajućih fajlova u sysfs.
    • Omogućeno korišćenje flaga SO_BINDTODEVICE korisnicima koji nemaju root privilegije.
    • Usvojena treća serija zakrpa koja prevodi alat ethtool sa ioctl() na korišćenje netlink interfejsa. Novi interfejs pojednostavljuje dodavanje proširenja, poboljšava obradu grešaka, omogućava slanje obaveštenja prilikom promene stanja, olakšava interakciju između jezgra i prostora korisnika i smanjuje broj sinhronizovanih imenovanih listi.
    • Dodana mogućnost korišćenja specijalnih hardverskih akceleratora za izvršavanje operacija praćenja konekcija.
    • U netfilter dodat huk za povezivanje klasifikatora odlaznih paketa (egress), koji je dopunio ranije prisutan huk za dolazne pakete (ingress).
  • Virtualizacija i sigurnost
    • Dodana hardverska implementacija autentifikacije pokazivača (Pointer Authentication), koja koristi specijalizirane CPU ARM64 instrukcije za zaštitu od napada koji koriste tehnike povratno orijentiranog programiranja (ROP), gdje napadač ne pokušava smjestiti svoj kod u memoriju, već koristi već prisutne dijelove mašinskih instrukcija u učitanim bibliotekama koji se završavaju instrukcijom vraćanja kontrole. Zaštita se svodi na korištenje digitalnih potpisa za provjeru adresa vraćanja na nivou jezgra. Potpis se čuva u neiskorištenim gornjim bitovima samog pokazivača. Za razliku od programskih implementacija, kreiranje i provjera digitalnih potpisa se vrši pomoću specijaliziranih CPU instrukcija.
    • Dodana je mogućnost zaštite područja memorije od pisanja putem sistemskog poziva userfaultfd(), namijenjenog obradi page faults (pristup nealokiranim stranicama memorije) u korisničkom prostoru. Ideja je koristiti userfaultfd() i za praćenje povrede pristupa stranicama označenim kao zaštićenim od pisanja, i pozivanje handlera koji može reagirati na slične pokušaje pisanja (na primjer, za obradu promjena u procesu stvaranja live-snapshota aktivnih procesa, fiksiranje stanja tokom prebacivanja dumpova memorije na disk, implementacija dijeljene memorije, praćenje promjena u memoriji). Funkcionalnost je ekvivalentna primjeni mprotect() u kombinaciji sa handlerom signala SIGSEGV, ali radi znatno brže.
    • U SELinuxu je zastarjeo parametar „checkreqprot“, koji omogućava isključivanje provjere zaštite memorije tokom obrade pravila (dozvoljavao je korištenje izvršnih područja memorije, neovisno od propisa definiranih u pravilima). Simboličkim linkovima kernfs je omogućen nasljedni kontekst roditeljskih direktorija.
    • U sastav uključen modul KRSI, što omogućava vezivanje BPF programa na bilo koje LSM hookove u jezgru. Promjena omogućava kreiranje LSM modula (Linux Security Module) u formi BPF programa za rješavanje zadataka audita i obaveznog kontrole pristupa.
    • Obavljen optimizacija performansi /dev/random putem paketnog prijenosa vrijednosti CRNG umjesto pojedinačnih poziva instrukcija RNG. Poboljšan rad getrandom i /dev/random na ARM64 sistemima koji pružaju RNG instrukcije.
    • Implementacija eliptične krivulje Curve25519 zamijenjena alternativom iz biblioteke HACL, za koju je osigurano matematičko dokazivanje formalne verifikacije pouzdanosti.
    • Dodato mehanizam obaveštavanja o slobodnim stranicama memorije. Pomoću ovog mehanizma gostujući sistemi mogu slati host sistemu informacije o stranicama koje se više ne koriste, a te stranice host može ponovo preuzeti.
    • U vfio/pci dodata podrška SR-IOV (Single-Root I/O Virtualization).
  • Memorija i sistemske usluge
    • Od 80 do 100 karaktera povećan ograničenje na maksimalnu dužinu niza u izvorim tekstovima. I dalje se preporučuje da se programeri drže granica od 80 karaktera po redu, ali to više nije strogo pravilo. Pored toga, prekoračenje limita dužine reda sada će dovesti do ispisivanja upozorenja prilikom kompajliranja samo ako je alat checkpatch pokrenut sa opcijom "--strict". Izmena će omogućiti programerima da ne budu ometani u manipulacije sa razmacima i da se slobodnije osećaju prilikom poravnanja koda, kao i sprečiće prekomerno razdvajanje redova, koje ometa percepciju koda i pretragu.
    • Dodana je podrška mešanom režimu pokretanja EFI, koji omogućava pokretanje 64-bitnog jezgra iz 32-bitnog firmvera koji se izvršava na 64-bitnom CPU-u bez korišćenja specijalizovanog bootloader-a.
    • Uključena sistem za otkrivanje i debagovanje rascepa blokada (split lock), koje nastaju prilikom pristupa neusklađenim podacima u memoriji zbog toga što pri izvršavanju atomarne instrukcije podaci prelaze dve linije keša CPU-a. Ove blokade dovode do značajnog opadanja performansi (na 1000 ciklusa sporije nego atomarna operacija sa podacima koji padaju u jednu liniju keša). U zavisnosti od boot parametra "split_lock_detect", jezgro može u letu otkrivati ovakve blokade i ispisivati upozorenja ili slati signal SIGBUS aplikaciji koja je izazvala blokadu.
    • U planera zadataka obezbeđeno je praćenje pokazatelja senzora temperature (Thermal Pressure) i implementiran je nadzor pregrevanja pri raspoređivanju zadataka. Koristeći дату статистику, upravljač temperaturom (thermal governor) može prilagoditi maksimalnu frekvenciju CPU-a u slučaju pregrejavanja, a planer zadataka sada uzima u obzir smanjenje računarske snage zbog takvog smanjenja frekvencije prilikom planiranja pokretanja zadataka (ranije je planer reagovao na promenu frekvencije s određenim kašnjenjem, neko vreme donoseći odluke na osnovu precenjenih pretpostavki o dostupnim proračunskim resursima).
    • U planer zadataka uključeni su invarijantni pokazatelji praćenja opterećenja, koji omogućavaju tačno ocenjivanje opterećenja, bez obzira na trenutnu frekvenciju rada CPU-a. Promena omogućava tačnije prognoziranje ponašanja zadataka u uslovima dinamičkih promena napona i frekvencije CPU-a. Na primer, zadatak koji je trošio 1/3 resursa CPU-a pri frekvenciji od 1000 MHz, trošiće 2/3 resursa pri smanjenju frekvencije na 500 MHz, što je ranije stvaralo lažne pretpostavke o radu na punoj snazi (tj. zadaci za planer su se činili većim samo zbog smanjenja frekvencije, što je dovodilo do donošenja pogrešnih odluka u schedutil cpufreq governor-u).
    • Intel P-state drajver, odgovoran za izbor režima performansi, prebačen je na korišćenje schedutil.
    • Omogućena je upotreba BPF podsistema prilikom rada jezgra u realnom vremenu (PREEMPT_RT). Ranije, prilikom uključivanja PREEMPT_RT, bilo je naloženo isključivanje BPF-a.
    • Dodana je nova vrsta BPF programa — BPF_MODIFY_RETURN, koji se mogu pričvrstiti na funkciju u jezgru i promeniti vrednost koju ta funkcija vraća.
    • Dodana je mogućnost korišćenja sistemskog poziva clone3() za kreiranje procesa u cgroup-u, koji se razlikuje od roditeljskog cgroup-a, što omogućava roditeljskom procesu da primeni ograničenja i uključi računanje odmah nakon stvaranja novog procesa ili niti. Na primer, menadžer usluga može direktno dodeliti nove usluge u odvojene cgroup-e, a novi procesi kada se stave u 'zamrznute' cgroup-e odmah će biti zaustavljeni.
    • u Kbuild dodata podrška za promenljivu okruženja 'LLVM=1' za prebacivanje na alate Clang/LLVM prilikom sastavljanja jezgra. Povećani su zahtevi za verzijom binutils (2.23).
    • U debugfs dodata je sekcija /sys/kernel/debug/kunit/ sa rezultatima kunit testova.
    • Dodana je opcija za učitavanje jezgre pm_debug_messages (analog /sys/power/pm_debug_messages), koja uključuje ispis dijagnostičkih informacija o radu sistema upravljanja napajanjem (korisno za otklanjanje problema sa režimima spavanja i čekanja).
    • U interfejsu asinkronog ulaza/izlaza io_uring dodana podrška splice() i atomskog odabira bafera.
    • Poboljšano je profilisanje cgroup-a pomoću alata perf. Ranije je perf mogao profilisati zadatke samo u određenom cgroup-u i nije mogao otkriti kojem cgroup-u pripada trenutni uzorak. Sada perf dobija informacije o cgroup-u za svako uzorkovanje, što omogućava profilisanje više od jednog cgroup-a i primjenu sortiranja po
      cgroup-u u izveštajima.
    • U cgroupfs, pseudo-FS za upravljanje cgroups, dodana je podrška za proširene atribute (xattrs) kojima, na primer, može ostavljati dodatne informacije za obrtnike u korisničkom prostoru.
    • U cgroup memory controller dodatdodana je podrška za rekurzivnu zaštitu vrednosti "memory.low", koja reguliše minimalnu količinu radne memorije dostupne članovima grupe. Kada se montira hijerarhija cgroup-a sa opcijom "memory_recursiveprot", vrednost "memory.low", koja je postavljena za donje čvorove, automatski će se raspodeliti za sve podčvorove.
    • Dodato framework Uacce (Unified/User-space-access-intended Accelerator Framework) za deljenje virtuelnih adresa (SVA, Shared Virtual Addressing) između CPU-a i periferijskih uređaja, omogućava hardverskim akceleratorima pristup strukturi podataka u glavnom CPU-u.
  • Hardverske arhitekture
    • Za ARM arhitekturu implementirana je mogućnost vrućeg vađenja memorije.
    • Za RISC-V arhitekturu dodana je podrška za vruće povezivanje i vađenje CPU-a (CPU hotplug). Za 32-bitni RISC-V implementiran je eBPF JIT.
    • Uklonjena je mogućnost korišćenja 32-bitnih ARM sistema za pokretanje virtuelnih okruženja KVM.
    • Uklonjena je "fiktivna" implementacija NUMA za s390 arhitekturu, za koju nisu pronađeni scenariji upotrebe koji omogućavaju poboljšanje performansi.
    • Za ARM64 dodana je podrška za proširenje AMU (Activity Monitors Unit), definisano u ARMv8.4, koje pruža brojače performansi, koji su korišćeni za izračunavanje koeficijenata korekcije skaliranja frekvencije u planeru zadataka.
  • Oprema
    • Dodana je podrška za vDPA uređaje koji koriste kanal za razmjenu podataka koji odgovara virtio specifikacijama. vDPA uređaji mogu biti fizički povezani hardver ili programski emulirani virtualni uređaji.
    • U GPIO podsystemu pojavio se nova ioctl() komanda za praćenje promjena koja omogućava obavještavanje procesa o promjeni stanja bilo kojeg GPIO pina. Kao primjer korištenja nove komande predložena je alat gpio-watch.
    • U DRM drajveru i915 za Intel grafičke kartice uključeno po defaultu podržava Tigerlake čipove („Gen12“) i dodana je osnovna podrška za upravljanje OLED pozadinskim osvjetljenjem. Pružena je poboljšana podrška za Ice Lake, Elkhart Lake, Baytrail i Haswell čipove.
    • U amdgpu drajveru dodata dodana je mogućnost učitavanja firmvera u USBC čip za ASIC. Pružena je bolja podrška za AMD Ryzen 4000 „Renoir“. Uvedena je podrška za upravljanje OLED panelima. Osigurano je prikazivanje stanja firmvera u debugfs.
    • U vmwgfx DRM drajveru za VMware virtualizacijske sisteme dodana je mogućnost korištenja OpenGL 4 u gostujućim sistemima (ranije je podržavan OpenGL 3.3).
    • Dodavan je novi DRM drajver tidss za sistem prikaza platforme TI Keystone.
    • Dodani su drajveri za LCD panele: Feixin K101 IM2BA02, Samsung s6e88a0-ams452ef01, Novatek NT35510, Elida KD35T133, EDT, NewEast Optoelectronics WJFH116008A, Rocktech RK101II01D-CT, Frida FRD350H54004.
    • U sustavu upravljanja energijom dodata dodana je podrška za Intel Jasper Lake (JSL) platformu zasnovanu na Atomu.
    • Dodana je podrška za laptop Pinebook Pro baziran na Rockchip RK3399, tablet Pine64 PineTab i pametni telefon PinePhone zasnovan na Allwinner A64.
    • Dodana je podrška za nove audio kodeke i čipove:
      Amlogic AIU, Amlogic T9015, Texas Instruments TLV320ADCX140, Realtek RT5682, ALC245, Broadcom BCM63XX I2S, Maxim MAX98360A, Presonus Studio 1810c, MOTU MicroBook IIc.
    • Dodana je podrška za ARM platforme i Qualcomm Snapdragon 865 (SM8250), IPQ6018, NXP i.MX8M Plus, Kontron „sl28“, 11 varijanti i.MX6 TechNexion Pico, tri nove varijante Toradex Colibri, Samsung S7710 Galaxy Xcover 2 zasnovan na ST-Ericsson u8500, DH Electronics DHCOM SoM i PDK2, Renesas M3ULCB, Hoperun HiHope, Linutronix Testbox v2, PocketBook Touch Lux 3.

Izvor: opennet.ru

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster