Nešto o inode-u

Povremeno, s ciljem preseljenja u CRU, intervjuiram se u raznim velikim kompanijama, prvenstveno u Petersburgu i Moskvi na poziciju DevOps. Primijetio sam da u mnogim kompanijama (u mnogim dobrim kompanijama, na primjer u Yandexu) postavljaju dva slična pitanja:

  • što je inode;
  • iz kojih razloga može doći do greške prilikom zapisivanja na disk (ili na primjer: zašto može ponestati prostora na disku, suština je ista).

Kao što to obično biva, bio sam uvjeren da dobro poznajem ovu temu, ali čim sam počeo objašnjavati — isplivali su nedostaci u znanju. Da sistematizujem svoje znanje, popunim praznine i više se ne osramotim, pišem ovaj članak, možda će nekom drugom također koristiti.

Počeću "od dna", tj. od hard diska (fleš uređaji, SSD i druge moderne stvari ostavljamo po strani, za primjer uzimamo bilo koji stari disk od 20 ili 80 gigabajta, s obzirom na to da je veličina bloka 512 bajtova).

Hard disk ne može adresirati svoj prostor po bajtovima, uvjetno je podijeljen na blokove. Numeracija blokova počinje od 0. (to se naziva LBA, detalji ovde: ru.wikipedia.org/wiki/LBA)

Nešto o inode-u

Kao što se može vidjeti iz dijagrama, LBA blokove sam označio kao nivo HDD. Usput, veličinu bloka vašeg diska možete provjeriti ovako:

root@ubuntu:/home/serp# blockdev --getpbsz /dev/sdb
512

Na višem nivou je particija, jedna za ceo disk (opet zbog jednostavnosti). Najčešće se koriste dva tipa particionisanja: msdos i gpt. Takođe, msdos je stari format koji podržava diskove do 2Tb, dok je gpt novi format sposoban adresirati do 1 zettabajta blokova od 512 bajta. U našem slučaju imamo particiju tipa msdos, kako se može vidjeti iz dijagrama, particija počinje od bloka br. 1, dok se nulti koristi za MBR.

U prvoj particiji sam stvorio ext2 datotečni sistem, prema zadanim postavkama veličina bloka mu je 4096 bajta, što je takođe prikazano na dijagramu. Veličinu bloka datotečnog sistema možete provjeriti ovako:

root@ubuntu:/home/serp# tune2fs -l /dev/sdb1
tune2fs 1.42.9 (4-Feb-2014)
Ime volumena datotečnog sistema:   
Posljednji put montiran na:          
UUID datotečnog sistema:          a600bf40-f660-41f6-a3e6-96c303995479
Magični broj datotečnog sistema:  0xEF53
Revision datotečnog sistema #:    1 (dynamic)
Funkcije datotečnog sistema:      ext_attr resize_inode dir_index filetype sparse_super large_file
Zastavice datotečnog sistema:         signed_directory_hash
Default mount options:    user_xattr acl
Stanje datotečnog sistema:         clean
Ponašanje kod grešaka:          Continue
OS tip datotečnog sistema:       Linux
Broj inoda:              65536
Broj blokova:              261888
Rezervisani broj blokova:     13094
Slobodni blokovi:              257445
Slobodni inodi:              65525
Prvi blok:              0
Veličina bloka:               4096
Veličina fragmenta:            4096
Rezervisani GDT blokovi:      63
Blokovi po grupi:         32768
Fragmenti po grupi:      32768
Inodi po grupi:         8192
Inode blokovi po grupi:   512
Datotečni sistem kreiran:       Pet Aug  2 15:02:13 2019
Posljednji put montiran:          n/a
Posljednji put pisan:          Pet Aug  2 15:02:14 2019
Broj montiranja:              0
Maksimalni broj montiranja:      -1
Posljednji provjeren:             Pet Aug  2 15:02:13 2019
Interval provjere:           0 ()
Rezervisani blokovi uid:      0 (user root)
Rezervisani blokovi gid:      0 (group root)
Prvi inode:              11
Veličina inoda:               256
Potrebna dodatna veličina:     28
Željena dodatna veličina:      28
Default hash za direktorij:   half_md4
Sjemenke za hash direktorija:      c0155456-ad7d-421f-afd1-c898746ccd76

Parametar koji nam treba je „Veličina bloka“.

Sada comes najzanimljivije, kako pročitati datoteku /home/serp/testfile? Datoteka se sastoji od jednog ili više blokova datotečnog sistema u kojima su pohranjeni njeni podaci. Kako je pronaći znajući ime datoteke? Koje blokove čitati?

Tu dolaze do izražaja inode. U datotečnom sistemu ext2fs postoji „tabela“, koja sadrži informacije o svim inodima. Broj inoda u slučaju ext2fs definira se pri kreaciji datotečnog sistema. Numat prikazan u parametru „Broj inoda“ u izlazu tune2fs, tj. imamo 65536 komada. U inodu se nalaze informacije koje nam trebaju: lista blokova datotečnog sistema za traženu datoteku. Kako pronaći broj inoda za navedenu datoteku?

Odnos između imena i broja inoda se nalazi u direktoriju, a direktorij u ext2fs - to je datoteka posebnog tipa pa također ima svoj broj inoda. Da bismo razbili ovaj začarani krug, za korijenski direktorij dodijeljen je „fiksni“ broj inoda „2“. Pogledajmo sadržaj inoda s brojem 2:

root@ubuntu:/# debugfs /dev/sdb1
debugfs 1.42.9 (4-Feb-2014)
debugfs:  stat 

Inode: 2   Tip: direktorij    Mod:  0755   Zastavice: 0x0
Generacija: 0    Verzija: 0x00000000:00000002
Korisnik:     0   Grupa:     0   Veličina: 4096
File ACL: 0    Directory ACL: 0
Linkovi: 3   Broj blokova: 8
Fragment:  Adresa: 0    Broj: 0    Veličina: 0
 ctime: 0x5d43cb51:16b61bcc -- Pet Aug  2 16:34:09 2019
 atime: 0x5d43c247:b704301c -- Pet Aug  2 15:55:35 2019
 mtime: 0x5d43cb51:16b61bcc -- Pet Aug  2 16:34:09 2019
crtime: 0x5d43b5c6:00000000 -- Pet Aug  2 15:02:14 2019
Veličina dodatnih inodnih polja: 28
BLOKOVI:
(0):579
UKUPNO: 1

Kao što se može vidjeti, potrebna nam je mapa u bloku s brojem 579. U njoj ćemo pronaći broj noda za mapu home, i tako dalje po lancu, dok u mapi serp ne vidimo broj noda za traženu datoteku. Ako netko želi provjeriti je li broj točan i ima li potrebnih informacija, nije teško. Radimo:

root@ubuntu: /# dd if=/dev/sdb1 of=/home/serp/dd_image bs=4096 count=1 skip=579
1+0 zapisa u
1+0 zapisa van
4096 bajtova (4,1 kB) kopirano, 0,000184088 s, 22,3 MB/s
root@ubuntu: /# hexdump -c /home/serp/dd_image

U ispisu se mogu pročitati imena datoteka u mapi.

Evo, došao sam do glavnog pitanja: „koji su razlozi za pojavu greške pri zapisu”?

Naravno, to će se dogoditi ako ne ostane slobodnih blokova u datotečnom sustavu. Što se može učiniti u tom slučaju? Osim očitog „izbaci nešto što nije potrebno”, trebali bismo imati na umu da u datotečnim sustavima ext2, 3 i 4 postoji nešto što se zove „Rezervirani broj blokova”. Ako pogledamo u ispis iznad, imamo takvih blokova „13094”. To su blokovi dostupni za zapis samo korisniku root. Međutim, ako je potrebno hitno riješiti problem, kao privremeno rješenje, možete ih učiniti dostupnim svima, čime se stvara malo slobodnog prostora:

root@ubuntu: /mnt# tune2fs -m 0 /dev/sdb1
tune2fs 1.42.9 (4-Feb-2014)
Postavljanje postotka rezerviranih blokova na 0% (0 blokova)

Drugim riječima, po defaultu, 5% prostora na disku nije dostupno za zapis, a uzimajući u obzir kapacitete modernih diskova, to mogu biti stotine gigabajta.

Što još može biti? Postoji mogućnost i da su slobodni blokovi dostupni, ali su nodovi istekli. To se obično događa ako imate u datotečnom sustavu mnoštvo datoteka veličine manjih od veličine bloka datotečnog sustava. Uzimajući u obzir da se za 1 datoteku ili mapu troši 1 inode, a ukupno ih imamo (za ovaj datotečni sustav) 65536 — situacija je više nego realna. Očigledno se to može vidjeti iz ispisa naredbe df:

serp@ubuntu:~$ df -hi
Filesystem     Inodes IUsed IFree IUse% Mounted on
udev             493K   480  492K    1% \/dev
tmpfs            493K   425  493K    1% \/run
\/dev\/xvda1       512K  240K  273K   47% \
none             493K     2  493K    1% \/sys\/fs\/cgroup
none             493K     2  493K    1% \/run\/lock
none             493K     1  493K    1% \/run\/shm
none             493K     2  493K    1% \/run\/user
\/dev\/xvdc1       320K  4,1K  316K    2% \/var
\/dev\/xvdb1        64K   195   64K    1% \/home
\/dev\/xvdh1       4,0M  3,1M  940K   78% \/var\/www
serp@ubuntu:~$ df -h
Filesystem      Size  Used Avail Use% Mounted on
udev            2,0G  4,0K  2,0G   1% \/dev
tmpfs           395M  620K  394M   1% \/run
\/dev\/xvda1      7,8G  2,9G  4,6G  39% \
none            4,0K     0  4,0K   0% \/sys\/fs\/cgroup
none            5,0M     0  5,0M   0% \/run\/lock
none            2,0G     0  2,0G   0% \/run\/shm
none            100M     0  100M   0% \/run\/user
\/dev\/xvdc1      4,8G  2,6G  2,0G  57% \/var
\/dev\/xvdb1      990M  4,0M  919M   1% \/home
\/dev\/xvdh1       63G   35G   25G  59% \/var\/www

Kao što je jasno vidljivo na delu \/var\/www, količina slobodnih blokova datotečnog sistema i količina slobodnih inoda se znatno razlikuju.

U slučaju da ponestane inoda, ne mogu da dam nikakva uputstva, pošto ih nema (ako grešim, javite mi). Za delove gde se kreiraju mali fajlovi, treba pažljivo birati datotečni sistem. Na primer, u btrfs inodi ne mogu da ponestanu, jer se dinamički kreiraju novi po potrebi.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster