For Linux kernel 6.2, improvements in RAID5/6 will be included in Btrfs

To enable it, improvements to Btrfs are proposed in Linux kernel 6.2 to address the 'write hole' issue in the RAID 5/6 implementation. The essence of the problem is that if a crash occurs during a write, it is initially impossible to determine which block was correctly written on which of the RAID devices, and in which the write was not completed. When attempting to recover RAID in such a situation, corruption of blocks corresponding to unwritten blocks may occur, as the state of the RAID blocks becomes desynchronized. This issue arises in any RAID1/5/6 arrays where no special measures have been taken to combat such an effect.

In the RAID implementation, similar to RAID1 in Btrfs, this problem is solved by using checksums in both copies; in case of a mismatch, the data is simply restored from the second copy. This approach also works if some device starts delivering incorrect data instead of failing completely.

However, in the case of RAID5/6, the file system does not store checksums for parity blocks: under normal circumstances, the integrity of the blocks is checked by the fact that they are all accompanied by a checksum, and the parity block can be recreated from the data. However, in the case of a partial write, this approach may not work in certain situations. In this case, when recovering the array, it is possible that the blocks involved in the incomplete write will be restored incorrectly.

NÄr det gjelder btrfs, er dette problemet mest aktuelt nÄr skrivningen som gjÞres er mindre enn stripebredden. I sÄ fall mÄ filsystemet utfÞre en lese-modifiser- skrive-operasjon (read-modify-write, RMW). Hvis det oppstÄr blokker med ufullstendig skriving, kan RMW-operasjonen fÞre til Þdeleggelser som ikke blir oppdaget, til tross for sjekksummer. Utviklerne har gjort endringer slik at RMW-operasjonen sjekker sjekksummene pÄ blokkene fÞr den utfÞrer operasjonen, og ved behov for datagjenoppretting utfÞres ogsÄ sjekksummer etter skrivingen. Dessverre fÞrer dette til ekstra overhead for beregning av sjekksummer i situasjoner med ufullstendig skriving av striper (RMW), men det Þker betydelig pÄliteligheten. Denne logikken er ikke klar for RAID6 ennÄ, men for en slik feil i RAID6 mÄ skrivningen mislykkes pÄ to enheter samtidig, noe som er mindre sannsynlig.

I tillegg kan man merke seg anbefalingene fra utviklerne nÄr det gjelder bruk av RAID5/6. Hovedpoenget er at i Btrfs kan lagringsprofilen for metadata og data variere. Man kan bruke RAID1-profil (speil) eller til og med RAID1C3 (3 kopier) for metadata, mens man for data kan bruke RAID5 eller RAID6. Dette gir trygg beskyttelse av metadata og unngÄr 'write hole' pÄ den ene siden, samtidig som man fÄr mer effektiv plassutnyttelse som er karakteristisk for RAID5/6 pÄ den andre. Dette bidrar til Ä unngÄ Þdeleggelser av metadata, og dataskader kan rettes.

Det er ogsÄ verdt Ä merke seg at for SSD-er i Btrfs i kjerne 6.2 vil asynkron utfÞrelse av 'discard'-operasjonen (merking av frigjorte blokker som ikke lenger trenger Ä lagres fysisk) bli aktivert som standard. Fordelen med denne modusen er hÞy ytelse pÄ grunn av effektiv gruppering av 'discard'-operasjoner i kÞen, og videre behandling av kÞen av en bakgrunnsbehandler, slik at normale filsystemoperasjoner ikke blir forsinket, i motsetning til synkron 'discard' ved frigjÞring av blokker, og SSD kan ta bedre beslutninger. PÄ den annen side vil det ikke lenger vÊre nÞdvendig Ä bruke verktÞy som fstrim, ettersom alle tilgjengelige blokker vil bli renset i filsystemet uten behov for tilleggsinnskanning og uten Ä bremse operasjonene.

Kilde: opennet.ru

KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere đŸ”„ KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere | ProHoster