🥇MinIO kõige väiksemate jaoks

MinIO — suurepärane lahendus, kui on vaja lihtsalt ja kiiresti organiteerida objektide ladustamine. Elemantaarne seadistamine, mitmed platvormid ja hea jõudlus on teinud oma töö rahva armastuselt. Seega polnud meil muud teed, kui kuu aega tagasi teatada ühilduvusest. Veeam Backup & Replication ja MinIO. Sh kaasa arvatud selline oluline funktsioon nagu Immutability. Tegelikult on MinIO-l terve osa dokumentatsioon, mis on pühendatud meie integreerimisele.

Seetõttu räägime täna sellest, kuidas:

Seadistada MinIO väga kiiresti.
Seadistada MinIO veidi vähem kiiresti, kuid kordades kvaliteetsemalt.
Kasutada seda Veeam SOBR skaleeritava hoidla Archive Tier'i jaoks.

Mis sa oled?

Lühike sissejuhatus neile, kes pole kohtunud MinIO-ga. See on avatud lähtekoodiga objektide ladustamine, millel on Amazon S3 API-ga ühilduvus. Vabastatakse Apache v2 litsentsi all ja järgib spartalikkuse filosoofiat.

See, tal puudub mahukas GUI, millel on armatuurlaud, diagrammid ja arvukad menüüd. MinIO käivitab oma serveri ühe käsuga, kus saab lihtsalt andmeid salvestada, kasutades kogu S3 API võimet. Kuid tuleb märkida, et see lihtsus võib olla petlik, kui jutt käib kasutatavatest ressurssidest. RAM ja CPU tarbimine on suurepärane, kuid selle põhjustest räägime hiljem. Ja muide, sellised kombainid nagu FreeNAS ja TrueNAS kasutavad MinIO-d just kapoti all.

Sellega saame sissejuhatuse lõpetada.

MinIO seadistamine on väga kiire.

Seadistamine on nii kiire, et vaatleme seda Windowsis ja Linuxis. On olemas variante ka dockerile, kubernetesele ja isegi macOS-ile, kuid sisu on igal pool sama.

Nii et, Windowsi puhul suundume ametlikule veebisaidile. https://min.io/download#/windows ja laadime alla viimase versiooni. Seal on ka käivitamisjuhend:

 minio.exe server F:Data

Ja seal on link veidi põhjalikumale Kiire algusjuhend. Juhistele pole mõtet mitte uskuda, nii et käivitame selle ja saame umbes sellise vastuse.

See on kõik! Salvestus töötab ja saab alustada selle kasutamist. Ma ei naljanud, kui ütlesin, et MinIO on minimalistlik ja lihtsalt töötab. Kui minna käivitamise ajal antud lingile, siis maksimaalselt, mida seal teha saab, on luua paak. Ja saab alustada andmete kirjutamist.

Linuxi armastajatele on kõik sama lihtne. Lihtne juhend:


wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
./minio server /data

Tulemus ei erine sellest, mida varem nägite.

MinIO seadistamine on veidi mõtestatum

Kuidas me mõistame, eelmine lõik on katsetamise eesmärgil. Ja olgem ausad, MinIO-d kasutatakse meil testimiseks väga laialdaselt, milles me ei häbene tunnistada. Loomulikult see töötab, kuid sellist asja ei tohi viia kaugemale katse seadmetest. Seetõttu võtame käes viilijad ja hakkame seda lihvima.

HTTPS

Esimene kohustuslik samm teel tootmisse – krüpteerimine. Internetis on juba miljon ja tuhat juhendit MiniIO sertifikaatide lisamiseks, kuid nende üldine plaan on järgmine:

Loome sertifikaadi
Windowsi puhul paneme selle C:Users%User%.miniocerts
Linuxi puhul ${HOME}/.minio/certs
Taaskäivitage server

Lihtne Let’s Encrypt on igav ja sellest on igal pool kirjutatud, seetõttu on meie tee samurai tee, seega Windowsi puhul laeme alla Cygwin, Linuxi puhul kontrollime lihtsalt, kas meil on openssl installitud. Ja teeme natuke konsoolimagiat:

Loome võtmed: openssl ecparam -genkey -name prime256v1 | openssl ec -out private.key
Loome sertifikaadi võtme põhjal: openssl req -new -x509 -days 3650 -key private.key -out public.crt
Kopeerime private.key ja public.crt eespool nimetatud kausta
Taaskäivitame MinIO

Kui kõik läks nagu peab, siis oleme staatuses umbes sellised read.

Lülitame sisse MinIO Erasure Coding

Esiteks mõned sõnad teema kohta. Lühidalt: see on tarkvaraline kaitse andmete kahjustumise ja kadumise eest. Nagu RAID, ainult palju usaldusväärsem. Kui klassikaline RAID6 võib endale lubada kahe ketta kadumist, siis MinIO talub rahulikult ka poole kadumist. Üksikasjalikult on tehnoloogia kirjeldatud ametlikus juhendis. Aga kui võtta kõige olulisem, siis see on Reed-Solomoni koodide rakendus: kogu teave salvestatakse andmeplokkidena, millele lisatakse pariteediplokid. Ja tundub, et see on juba mitu korda tehtud, aga on üks oluline «aga»: me saame selgelt määrata pariteediplokkide ja andmeplokkide suhe salvestatud objektide jaoks.
Kas vajate 1:1? Palun!
Kas vajate 5:2? Pole probleemi!

See on väga oluline funktsioon, kui kasutate samaaegselt mitut nodi ja soovite leida omaenda tasakaalu maksimaalse andmete turvalisuse ja kasutatavate ressursside vahel. Vahetus MinIO kasutab valemit N/2 (kus N on kõvaketaste koguarv), st jagab teie andmed N/2 andmekettale ja N/2 pariteedikettale. Inimkeeles öeldes: saate kaotada poole ketastest ja andmed taastada. See suhe määratakse läbi Storage Class, võimaldades teil ise valida, mis on olulisem: usaldusväärsus või mahutavus.

Juhendis on selline näide: oletame, et teil on 16 kettaga installatsioon ja peate salvestama faili suurusega 100 MB. Kui kasutatakse vaikevõtteid (8 ketast andmete jaoks, 8 pariteedi blokiks), siis fail võtab lõpuks praktiliselt kahekordse mahu, st 200 MB. Kui ketaste suhe on 10/6, siis kulub 160 MB. 14/2 — 114 MB.

Teine oluline erinevus RAID-ist on see, et MinIO töötab objekti tasemel, taastades kadunud kettaid ükshaaval, ilma et kogu süsteemi töö katke oleks. Tavaline RAID aga peab taastama kogu mahuti, mis võtab ettearvamatult kaua aega. Autoril on meeles, et ketaspink, mis kaotas kaks ketast, läks üle arvestusele pooleteise nädala jooksul. See oli väga ebameeldiv.

Ja oluline märkus: MinIO jagab kõik kettad Erasure Coding'u jaoks komplektideks 4 kuni 16 ketta vahel, kasutades maksimaalselt võimalikku komplekti suurust. Edasi on üks teave salvestatud vaid ühte komplekti.

Kõik see tundub suurepärane, kuid kui keeruline on seadistamine? Vaatame. Võtame käsu käivitamiseks ja loetleme lihtsalt kettad, kus tuleb salvestus luua. Kui kõik on õigesti tehtud, näeme raportis kasutatud ketaste arvu. Ja soovitus, et ei ole mõistlik ühele hostile kohe pooli kettaid lisada, kuna see võib viia andmete kadumiseni.

c:minio>minio.exe server F: G: H: I: J: K:

Edasi vajame MinIO serveri haldamiseks ja seadistamiseks agendi, mille saab alla laadida. seal on samuti ametlikult veebilehelt.

Et mitte sõrmi kulutada, iga kord aadressi ja juurdepäsuvõtmeid tippides (ja see pole ka turvaline), on mugav esmakordsel käivitamisel kohe luua alias vastavalt valemile mc alias set [YOUR-ACCESS-KEY] [YOUR-SECRET-KEY]

mc alias set veeamS3 https://172.17.32.52:9000 YOURS3ACCESSKEY YOURSECERTKE

Või saate kohe lisada oma hosti:

mc config host add minio-veeam https://minio.jorgedelacruz.es YOURS3ACCESSKEY YOURSECERTKEY

Ja siis loome immutatud ämbri ilusa käsuga

mc mb --debug -l veeamS3/immutable 

mc:  PUT /immutable/ HTTP/1.1
Host: 172.17.32.52:9000
User-Agent: MinIO (windows; amd64) minio-go/v7.0.5 mc/2020-08-08T02:33:58Z
Content-Length: 0
Authorization: AWS4-HMAC-SHA256 Credential=minioadmin/20200819/us-east-1/s3/aws4_request, SignedHeaders=host;x-amz-bucket-object-lock-enabled;x-amz-content-sha256;x-amz-date, Signature=**REDACTED**
X-Amz-Bucket-Object-Lock-Enabled: true
X-Amz-Content-Sha256: UNSIGNED-PAYLOAD
X-Amz-Date: 20200819T092241Z
Accept-Encoding: gzip
mc:  HTTP/1.1 200 OK
Content-Length: 0
Accept-Ranges: bytes
Content-Security-Policy: block-all-mixed-content
Date: Wed, 19 Aug 2020 09:22:42 GMT
Location: /immutable
Server: MinIO/RELEASE.2020-08-16T18-39-38Z
Vary: Origin
X-Amz-Request-Id: 162CA0F9A3A3AEA0
X-Xss-Protection: 1; mode=block
mc:  Response Time: 253.0017ms

—debug t võimaldab näha mitte ainult lõppteadet, vaid ka põhjalikumat teavet.

-l tähendab —with-lock, mis tähendab immutaatset

Kui nüüd naasta veebiliidese juurde, siis seal ilmub meie uus ämbri.

Praegu on see kõik. Oleme loonud kaitstud salvestuse ja oleme valmis integreerima Veeamiga.

Võime veel veenduda, et kõik töötab suurepäraselt:

c:minio>mc admin info veeamS3

● 172.17.32.52:9000
   Uptime: 32 minutit
   Versioon: 2020-08-16T18:39:38Z
   Võrk: 1/1 OK
   Kõvakettad: 6/6 OK
0 B Kasutatud, 1 Karp, 0 Objekti
6 kõvakettast online, 0 kõvakettast offline

MinIO ja Veeam

Tähelepanu! Kui mingil uskumatul põhjusel soovite töötada HTTP kaudu, siis aadressil HKEY_LOCAL_MACHINESOFTWAREVeeamVeeam Backup and Replication looge DWORD võti SOBRArchiveS3DisableTLS. Seadke selle väärtus 1-ks ja pidage meeles, et me ei kiida sellist käitumist mingil juhul heaks ja ei soovita seda kellelegi.

Tähelepanu veel kord! Kui mõne arusaamatuse tõttu jätkate Windows 2008 R2 kasutamist, siis püüdes MinIO-d Veeamiga ühendada, saate tõenäoliselt umbes sellise vea: Failed to establish connection to Amazon S3 endpoint. See parandatakse ametliku plaastriga Microsoft.

Noh, valmistused on tehtud, avame VBR liidese ja liigume Backup Infrastructure vahekaardile, kus kutsume esile uue hoidla lisamise wizard'i.

Muidugi, huvitatud oleme Object storage'ist, eelkõige S3 ühilduvusest. Avanemas on viisard, kus määrame nime, liigume läbi sammude, märkides aadressi ja konto. Kui vajalik, siis ärge unustage märkida värava, mille kaudu proksitakse päringud salvestusele.

Seejärel valime ämberi, kausta ja märkime ruutu Make recent backups immutable. Või mitte. Kuid kuna me lõime salvestuse, mis toetab seda funktsiooni, oleks patt mitte kasutada.

Next > Finish ja naudime tulemust.

Nüüd tuleb see lisada SOBR-repositooriumi Capacity Tier'ina. Selleks kas loome uue või redigeerime olemasolevat. Meid huvitab samm Capacity Tier.

Siin peame valima, millise stsenaariumi järgi me töötame. Kõik variandid on üsna hästi kirjeldatud teises, artiklis, seega ei hakka ma kordama.

Ja pärast viisardi töö lõppu käivitatakse automaatselt ülesanded varukoopiate kopeerimiseks või teisaldamiseks. Kui aga teie plaanid ei hõlma koormuse kohe andmist kõikidele süsteemidele, siis määrake kindlasti lubatud ajavahemikud töö tegemiseks nuppu Window vajutades.

Ja, ja saab luua eraldi varukoopiate ülesandeid. Mõned peavad seda isegi mugavamaks, kuna need on kasutajale, kes ei soovi süveneda kapasitivitira töödetailsse, selgemad ja ennustatavad. Ja detailselt on seal piisavalt infot, nii et soovitan veel kord lugeda ülaltoodud linki.