🥇MinIO kõige väiksematele

MinIO — suurepärane lahendus, kui on vaja lihtsalt ja mugavalt korraldada objekti salvestust. Elementaarne seadistamine, mitmed platvormid ja hea jõudlus on teinud oma töö rahva armastuse nimel. Seega ei jäänud meil muud üle, kui kuu aega tagasi teatada ühilduvusest. Veeam Backup & Replication ja MinIO. Hõlmab sellist olulist funktsiooni nagu Immutability. Tegelikult on MinIO-l terve osa dokumentatsioon, mis on pühendatud meie integratsioonile.

Seetõttu räägime täna sellest, kuidas:

MinIO seadistamine on väga kiire.
MinIO seadistamine on veidi aeglasem, kuid oluliselt kvaliteetsem.
Kasutada seda Veeam SOBR-i skaleeritava arhiivitasandina.

Mis see on?

Lühike sissejuhatus neile, kes pole MinIO-ga kokku puutunud. See on avatud lähtekoodiga objekti salvestus, mis on ühilduv Amazon S3 API-ga. Välja antud Apache v2 litsentsi all ning järgib spartalikku minimalismi filosoofiat.

See tähendab, et sellel ei ole ulatuslikku GUI-d, mis koosneb armatuurlaudadest, diagrammidest ja arvukatest menüüdest. MinIO käivitab oma serveri lihtsalt ühe käsuga, kus saab andmeid salvestada, kasutades kogu S3 API jõudu. Kuid tuleks märkida, et see lihtsus võib olla petlik, kui rääkida kasutatavatest ressurssidest. RAM ja CPU tarbitakse suurepäraselt, kuid põhjustest räägime hiljem. Ja muide, sellised masinad nagu FreeNAS ja TrueNAS kasutavad oma sisemuses just MinIO-d.

Sellele sissejuhatusele võib tõmmata joone alla.

MinIO seadistamine on väga kiire

Selle seadistamine on nii kiire, et vaatame seda Windowsi ja Linuxi näitel. On olemas ka võimalused Dockerile, Kubernetesile ja isegi macOS-ile, kuid mõte on kõikjal sama.

Nii et Windowsi puhul suundume ametlikule veebilehele https://min.io/download#/windows ja laadime alla viimase versiooni. Seal näeme ka käivitamise juhendit:

 minio.exe server F:Data

Ja seal on link pisut ulatuslikumale Kiirusjuhendile. Juhenditesse ei tasu mitte uskuda, seega käivitame ja saame umbkaudu sellise vastuse.

Sellega on kõik! Salvestus töötab ja saab alustada selle kasutamist. Ma ei naljatlenud, kui ütlesin, et MinIO on minimalism ja lihtsalt töötab. Kui minna käivitamise ajal pakutud lingile, on seal saadaval funktsioonidest maksimum — luua ämber. Ja saab alustada andmete kirjutamist.

Linuxi armastajatele on kõik sama lihtne. Lihtne juhend:


wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
./minio server /data

Tulemus on eristamatu varem nähtust.

MinIO seadistamine on veidi arusaadavam.

Nagu me mõistame, on eelmine lõik testimise eesmärgil aja vähendamine. Ja olgem ausad, me kasutame MinIO-d laialdaselt testimise jaoks, mille üle me ei tunne mingit häbi. Loomulikult töötab see, kuid edasine raiskumine on häbiväärne. Seega võtame käerauad ja hakkame asja korrigeerima.

HTTPS

Esimene kohustuslik samm tootmisse jõudmiseks on krüpteerimine. Internetis on miljon ja tuhat käsiraamatut MinIO-sse sertifikaatide lisamiseks, kuid nende üldplaan on järgmine:

Loome sertifikaadi.
Windowsi puhul asetame selle kausta C:Users%User%.miniocerts.
Linuxi puhul kausta ${HOME}/.minio/certs.
Taaskäivitame serveri.

Banaalne Let’s Encrypt on igav ja sellest on igal pool kirjutatud, seega meie tee on samuraiteel, seega Windowsi puhul laadige alla Cygwin, Linuxi puhul kontrollime lihtsalt, et openssl oleks meie süsteemis paigaldatud. Ja teeme natuke konsoolimagiat:

Loome võtmed: openssl ecparam -genkey -name prime256v1 | openssl ec -out private.key.
Loome sertifikaadi võtme põhjal: openssl req -new -x509 -days 3650 -key private.key -out public.crt.
Kopeerime private.key ja public.crt ülaltoodud kausta.
Taaskäivitame MinIO.

Kui kõik läheb nagu plaanitud, siis staatuse juures ilmuvad umbes sellised read.

Lülitame sisse MinIO Erasure Coding.

Esiteks paar sõna teemast. Lühidalt: see on tarkvaraline kaitse andmete kahjustamise ja kadumise eest. Nagu RAID, kuid palju usaldusväärsem. Kui klassikaline RAID6 võib endale lubada kahe ketta kaotamist, siis MinIO talub rahulikult poole kadumist. Rohkem detaile tehnoloogia kohta on kirjeldatud ametlikus juhendis.. Kuid kui võtta asja tuum, siis see on Reed-Solomoni koodide rakendamine: kogu teave salvestatakse andmeblokina, millega on seotud pariteediblokid. Ja see on juba varem tehtud, kuid üks oluline "aga" on: me saame selgelt määrata pariteediblokite ja andmeblokite suhe salvestatud objektide jaoks.
Soovite 1:1? Palun!
Soovite 5:2? Pole probleemi!

See on väga oluline funktsioon, kui kasutate mitut sõlme ja soovite leida oma tasakaalu maksimaalse andmete turvalisuse ja kulutatud ressursside vahel. Vaikimisi kasutab MinIO valemit N/2 (kus N on kõvaketaste koguarv), st jagab teie andmed N/2 andmekettale ja N/2 pariteedikettale. Inimkeelde tõlgituna: saate kaotada pooled kettad ja andmed taastada. See suhe määratakse Salvestusklass, võimaldades teil ise valida, mis on olulisem: usaldusväärsus või maht.

Juhendis on selline näide: oletame, et teil on paigaldus 16 kettale ja peate salvestama faili, mille suurus on 100 MB. Kui kasutatakse vaikeseadeid (8 ketast andmete jaoks, 8 pariteediks), siis faili lõppmaht on praktiliselt kahekordne, st 200 MB. Kui ketaste suhe on 10/6, siis on vajalik 160 MB. Suhe 14/2 tähendaks 114 MB.

Teine oluline erinevus RAIDidest: kettaste rikke korral töötab MinIO objektitasemel, taastades andmeid üksikute elementidena, peatamata kogu süsteemi tööd. Samas kui tavaline RAID peab taastama kogu mahut, mis võtab ettearvamatult kaua aega. Autori mäletamist mööda kestis kettakappi, kus kaks ketast rikki läks, uuesti arvutamine poolteist nädalat. See oli väga ebameeldiv.

Ja oluline märkus: MinIO jagab kõik kettad Erasure Coding jaoks komplektideks, mis koosnevad 4 kuni 16 kettast, kasutades maksimaalset võimaliku komplekti suurust. Edasi, üks teabeelement salvestatakse ainult ühte komplekti.

See kõlab kõik väga kenasti, kuid kui keeruline on seadistus? Vaadakem. Võtame käsu käivitamiseks ja loetleme lihtsalt kettad, millele tuleb salvestus luua. Kui kõik on õigesti tehtud, näeme raportis kasutatud kettaste arvu. Ja soovitus, et ei oleks mõistlik ühe hostiga korraga lisada poole kettaid, sest see võib viia andmete kadumiseni.

c:minio>minio.exe server F: G: H: I: J: K:

Edasi vajame MinIO serveri haldamiseks ja seadistamiseks agenti, mille saab alla laadida seal samas ametlikult veebilehelt.

Kuna ei ole mõistlik pidevalt aadressi ja juurdepääsuvõtmeid tippida (ja see ei ole ka ohutu), on mugav esmasel käivitamisel kohe luua alias valemiga mc alias set <YOUR-MINIO-ENDPOINT> [YOUR-ACCESS-KEY] [YOUR-SECRET-KEY]

mc alias set veeamS3 https://172.17.32.52:9000 YOURS3ACCESSKEY YOURSECERTKE

Või saate kohe lisada oma hosti:

mc config host add minio-veeam https://minio.jorgedelacruz.es YOURS3ACCESSKEY YOURSECERTKEY

Ja siis loome immutable baketi toreda käsuga

mc mb --debug -l veeamS3/immutable

mc:  PUT /immutable/ HTTP/1.1
Host: 172.17.32.52:9000
User-Agent: MinIO (windows; amd64) minio-go/v7.0.5 mc/2020-08-08T02:33:58Z
Content-Length: 0
Authorization: AWS4-HMAC-SHA256 Credential=minioadmin/20200819/us-east-1/s3/aws4_request, SignedHeaders=host;x-amz-bucket-object-lock-enabled;x-amz-content-sha256;x-amz-date, Signature=**REDACTED**
X-Amz-Bucket-Object-Lock-Enabled: true
X-Amz-Content-Sha256: UNSIGNED-PAYLOAD
X-Amz-Date: 20200819T092241Z
Accept-Encoding: gzip
mc:  HTTP/1.1 200 OK
Content-Length: 0
Accept-Ranges: bytes
Content-Security-Policy: block-all-mixed-content
Date: Wed, 19 Aug 2020 09:22:42 GMT
Location: /immutable
Server: MinIO/RELEASE.2020-08-16T18-39-38Z
Vary: Origin
X-Amz-Request-Id: 162CA0F9A3A3AEA0
X-Xss-Protection: 1; mode=block
mc:  Response Time: 253.0017ms

—debug lubab näha mitte lihtsalt lõpp sõnumit, vaid põhjalikumat teavet.

õpivad see tähendab —with-lock, mis tähendab immutable

Kui nüüd minna veebiliidese juurde, siis ilmub sinna meie uus baket.

Praegu on see kõik. Oleme loonud kaitstud salvestamise ja oleme valmis Veeamiga integreerumiseks.

Võime veel veenduda, et kõik töötab suurepäraselt:

c:minio>mc admin info veeamS3

● 172.17.32.52:9000
   Uptime: 32 minutes
   Version: 2020-08-16T18:39:38Z
   Network: 1/1 OK
   Drives: 6/6 OK
0 B Used, 1 Bucket, 0 Objects
6 drives online, 0 drives offline

MinIO ja Veeam

Tähelepanu! Kui te mingil uskumatu põhjusel soovite töötada läbi HTTP, siis aadressil HKEY_LOCAL_MACHINESOFTWAREVeeamVeeam Backup and Replication looge DWORD võti SOBRArchiveS3DisableTLS. Seadke selle väärtuseks 1 ja pidage meeles, et me ei kiida sellist käitumist heaks ja ei soovita seda kellelegi.

Kordame veel kord! Kui mingisuguse arusaamatuse tõttu jätkate Windows 2008 R2 kasutamist, siis MinIO ühendamisel Veeamiga saate tõenäoliselt sellise vea: Failed to establish connection to Amazon S3 endpoint. Selle parandab ametlik patch Microsoft.

Noh, valmistamine on läbi, avame VBR liidese ja läheme Backup Infrastructure vahekaardile, kus käivitame uue repozitorio lisamise wizard.

Muidugi huvitab meid Object storage, nimelt S3 ühilduv. Avanevas wizardis määrame nime, läbime sammud aadressi ja konto määramiseks. Kui vajalik, siis ärge unustage täpsustada gatewayd, mille kaudu päringud salvestusele suunatakse.

Pärast seda valime baketi, kausta ja paneme linnukese Make recent backups immutable. Või mitte. Aga kuna me oleme teinud salvestuse, mis toetab seda funktsiooni, oleks patt seda mitte kasutada.

Next > Finish ja nautige tulemust.

Nüüd tuleb see lisada SOBR-i repositorysse Capacity Tierina. Selleks kas loome uue või redigeerime olemasolevat. Meid huvitab Capacity Tieri samm.

Siin peame valima, millise stsenaariumi alusel me töötame. Kõik valikud on üsna hästi kirjeldatud teises artiklis, nii et ma ei hakka kordama.

Ja pärast eksami lõpetamist käivitavad meistrid automaatselt varukoopiate kopeerimise või ülekande ülesanded. Kuid kui teie plaanidesse ei kuulu kohe koormuse andmine kõigile süsteemidele, siis seadke kindlasti lubatud intervallid tööks nupu Window kaudu.

Ja loomulikult saab teha ka eraldi Backup Copy ülesandeid. Mõned arvavad, et see on isegi mugavam, kuna need on kasutajale veidi läbipaistvamad ja prognoositavamad, kes ei soovi süveneda kapatsiteeditasemete töö üksikasjadesse. Ja seal on piisavalt detaile, seega soovitan veel kord vastavat artiklit ülaltoodud lingil.