Gwelodd y byd y prototeip cyntaf o storio gwrthrychau yn 1996. Mewn 10 mlynedd, bydd Amazon Web Services yn lansio Amazon S3, a bydd y byd yn dechrau mynd yn wallgof yn systematig gyda gofod cyfeiriad fflat. Diolch i'w drin metadata a'i allu i raddfa heb sagio dan lwyth, mae storio gwrthrychau yn gyflym wedi dod yn safon ar gyfer y rhan fwyaf o wasanaethau storio cwmwl a thu hwnt. Nodwedd bwysig arall yw ei allu i addasu'n dda ar gyfer storio archifau a ffeiliau tebyg na ddefnyddir yn aml. Roedd pawb sy'n ymwneud â storio data yn bloeddio ac yn cario'r dechnoleg newydd ar eu dwylo.
Ond roedd sibrydion pobl yn llawn sibrydion bod storio gwrthrychau yn ymwneud â chymylau mawr yn unig, ac os nad oes angen atebion arnoch gan y cyfalafwyr damniedig, yna bydd yn anodd iawn gwneud eich rhai eich hun. Mae llawer eisoes wedi'i ysgrifennu am ddefnyddio'ch cwmwl eich hun, ond nid oes digon o wybodaeth am greu'r atebion sy'n gydnaws â S3 fel y'u gelwir.
Felly, heddiw byddwn yn darganfod pa opsiynau sydd ar gael “I fod fel oedolion, ac nid CEPH a ffeil fwy”, byddwn yn defnyddio un ohonynt, a byddwn yn gwirio bod popeth yn gweithio gan ddefnyddio Veeam Backup & Replication. Mae'n honni cefnogaeth ar gyfer gweithio gyda storfeydd sy'n gydnaws â S3, a byddwn yn gwirio'r datganiad hwn.
Beth am eraill?
Rwy'n bwriadu dechrau gyda throsolwg bach o'r farchnad a'r opsiynau ar gyfer storio gwrthrychau. Yr arweinydd a'r safon a gydnabyddir yn gyffredinol yw Amazon S3. Y ddau erlidiwr agosaf yw Microsoft Azure Blob Storage ac IBM Cloud Object Storage.
Ai dyna i gyd? Onid oes cystadleuwyr eraill? Wrth gwrs, mae yna gystadleuwyr, ond mae rhywun yn mynd eu ffordd eu hunain, fel Google Cloud neu Oracle Cloud Object Storage, gyda chefnogaeth anghyflawn i'r API S3. Mae rhywun yn defnyddio hen fersiynau o'r API, fel Baidu Cloud. Ac mae rhai, fel Hitachi Cloud, yn gofyn am gymhwyso rhesymeg arbennig, a fydd yn sicr yn achosi ei anawsterau ei hun. Mewn unrhyw achos, mae pawb yn cael eu cymharu ag Amazon, y gellir ei ystyried yn safon y diwydiant.
Ond mewn atebion ar y safle, mae'r dewis yn llawer mwy, felly gadewch i ni amlinellu'r meini prawf sy'n bwysig i ni. Mewn egwyddor, dim ond dau sy'n ddigon: cefnogaeth i'r API S3 a'r defnydd o arwyddo v4. Yn ymarferol, dim ond mewn rhyngwynebau ar gyfer rhyngweithio y mae gennym ni, fel cleient y dyfodol, ddiddordeb, ac nid oes gennym gymaint o ddiddordeb yng nghegin fewnol y storfa ei hun.
Wel, mae llawer o atebion yn cyd-fynd â'r amodau syml hyn. Er enghraifft, pwysau trwm corfforaethol clasurol:
- DellEMC ECS
- Grid Storio NetApp S3
- Bwcedi Nutanix
- FlashBlade Storio Pur a StorReduce
- Huawei FusionStorage
Mae yna niche o atebion meddalwedd yn unig sy'n gweithio allan o'r bocs:
- Red Hat Ceph
- Storio Menter SSE
- Cymylog
Ac ni chafodd hyd yn oed y rhai sy'n hoffi prosesu ffeil yn ofalus ar ôl y cynulliad eu tramgwyddo:
- CEPH yn ei ffurf buraf
- Mini (fersiwn Linux, oherwydd mae llawer o gwestiynau am y fersiwn Windows)
Mae'r rhestr ymhell o fod yn gyflawn, gellir ei thrafod yn y sylwadau. Peidiwch ag anghofio gwirio perfformiad y system yn ogystal â chydnawsedd API cyn ei weithredu. Y peth olaf rydych chi ei eisiau yw colli terabytes o ddata oherwydd ceisiadau sownd. Felly mae croeso i chi lwytho profion. Yn gyffredinol, mae gan bob meddalwedd oedolion sy'n gweithio gyda llawer iawn o ddata adroddiadau cydnawsedd o leiaf. Rhag ofn Veeam mae ar brofion ar y cyd, sy'n ein galluogi i ddatgan yn eofn gydnawsedd llawn ein cynnyrch ag offer penodol. Mae hwn eisoes yn waith dwy ffordd, nid bob amser yn gyflym, ond rydym yn ehangu'n gyson atebion wedi'u profi.
Rhoi ein bwth at ei gilydd
Rwyf am siarad ychydig am ddewis pwnc prawf.
Yn gyntaf, roeddwn i eisiau dod o hyd i opsiwn a fyddai'n gweithio allan o'r bocs. Wel, neu o leiaf gyda'r tebygolrwydd mwyaf y bydd yn gweithio heb yr angen i wneud ystumiau diangen. Mae dawnsio gyda thambwrîn a dewis y consol gyda'r nos yn gyffrous iawn, ond weithiau rydych chi am iddo weithio ar unwaith. Ac mae dibynadwyedd cyffredinol atebion o'r fath fel arfer yn uwch. Ac ie, diflannodd ysbryd anturiaeth ynom, rhoesom y gorau i ddringo trwy'r ffenestri at ein merched annwyl, ac ati (c).
Yn ail, a bod yn onest, mae'r angen i weithio gyda storio gwrthrychau yn codi mewn cwmnïau gweddol fawr, felly mae hyn yn wir wrth edrych tuag at atebion lefel menter nid yn unig nid yn unig yn gywilydd, ond hyd yn oed yn cael ei annog. Beth bynnag, nid wyf yn gwybod eto am enghreifftiau o rywun yn cael ei danio am brynu datrysiadau o'r fath.
Yn seiliedig ar yr uchod, disgynnodd fy newis Rhifyn Cymunedol Dell EMC ECS. Mae hwn yn brosiect diddorol iawn, ac rwyf o'r farn ei bod yn angenrheidiol dweud wrthych amdano.
Y peth cyntaf sy'n dod i'ch meddwl pan welwch yr ychwanegiad Argraffiad Cymunedol - mai dim ond papur olrhain yw hwn o ECS llawn gyda rhai cyfyngiadau sy'n cael eu dileu trwy brynu trwydded. Felly na!
Cofiwch:
!!!Mae Community Edition yn brosiect ar wahân a grëwyd i'w brofi a heb gefnogaeth dechnegol Dell!!
Ac ni ellir ei droi'n ECS llawn, hyd yn oed os ydych chi wir eisiau.
Gadewch i ni ei chyfrif i maes
Mae llawer o bobl yn meddwl mai Dell EMC ECS yw'r ateb gorau bron os oes angen storio gwrthrychau arnoch chi. Mae pob prosiect o dan y brand ECS, gan gynnwys rhai masnachol a chorfforaethol, yn . Rhyw fath o arwydd o ewyllys da gan Dell. Ac yn ychwanegol at y feddalwedd sy'n rhedeg ar eu caledwedd brand, mae fersiwn ffynhonnell agored y gellir ei defnyddio hyd yn oed yn y cwmwl, hyd yn oed ar beiriant rhithwir, hyd yn oed mewn cynhwysydd, hyd yn oed ar unrhyw un o'ch caledwedd. Wrth edrych ymlaen, mae hyd yn oed fersiwn OVA, y byddwn yn ei ddefnyddio.
Mae Rhifyn Cymunedol DELL ECS ei hun yn fersiwn fach o'r feddalwedd lawn sy'n rhedeg ar weinyddion brand Dell EMC ECS.
Rwyf wedi nodi pedwar prif wahaniaeth:
- Dim cefnogaeth amgryptio. Mae'n drueni, ond nid yn hollbwysig.
- Nid oes haen ffabrig. Mae'r peth hwn yn gyfrifol am adeiladu clystyrau, rheoli adnoddau, diweddaru, monitro a storio delweddau Docker. Yma mae eisoes yn siomedig iawn, ond gellir deall Dell hefyd.
- Canlyniad mwyaf cas y pwynt blaenorol: ni ellir ehangu maint y nod ar ôl cwblhau'r gosodiad.
- Dim cefnogaeth dechnolegol. Mae hwn yn gynnyrch i'w brofi, nad yw wedi'i wahardd i'w ddefnyddio mewn gosodiadau bach, ond yn bersonol ni fyddwn yn meiddio uwchlwytho petabytes o ddata pwysig yno. Ond yn dechnegol, ni all neb eich atal rhag gwneud hyn.
Beth sydd yn y fersiwn mawr?
Gan garlamu trwy Ewrop, gadewch i ni fynd dros yr atebion haearn er mwyn cael darlun mwy cyflawn o'r ecosystem.
Ni fyddaf rywsut yn cadarnhau nac yn gwrthbrofi'r datganiad mai DELL ECS yw'r storfa wrthrychau on-prem orau, ond os oes gennych rywbeth i'w ddweud ar y pwnc hwn, byddaf yn hapus i'w ddarllen yn y sylwadau. Mewn unrhyw achos, yn ôl y fersiwn Mae Dell EMC yn mynd i mewn i'r pum arweinydd marchnad OBS gorau yn hyderus. Er nad yw atebion sy'n seiliedig ar gwmwl yn cael eu hystyried, mae hon yn sgwrs ar wahân.
O safbwynt technegol, mae ECS yn storfa gwrthrychau sy'n darparu mynediad at ddata gan ddefnyddio protocolau storio cwmwl. Yn cefnogi AWS S3 ac OpenStack Swift. Ar gyfer bwcedi ffeil-alluogi, mae ECS yn cefnogi NFSv3 ar gyfer allforio ffeil-wrth-ffeil.
Mae'r broses o ysgrifennu gwybodaeth braidd yn anarferol, yn enwedig ar ôl y systemau storio bloc clasurol.
- Pan fydd data newydd yn cyrraedd, mae gwrthrych newydd yn cael ei greu sydd ag enw, y data ei hun, a metadata.
- Rhennir gwrthrychau yn dalpiau 128 MB, ac ysgrifennir pob talp i dri nod ar unwaith.
- Mae'r ffeil mynegai yn cael ei diweddaru, lle cofnodir dynodwyr a lleoliadau storio.
- Mae'r ffeil log (log cofnod) yn cael ei ddiweddaru a hefyd ei ysgrifennu i dri nod.
- Anfonir neges at y cleient am record lwyddiannus.
Mae pob un o'r tri chopi o'r data wedi'u hysgrifennu ochr yn ochr. Ystyrir bod yr ysgrifennu yn llwyddiannus dim ond os cafodd y tri chopi eu hysgrifennu'n llwyddiannus.
Mae darllen yn haws:
- Mae'r cleient yn gofyn am ddata.
- Mae'r mynegai yn chwilio am le i storio data.
- Darllenir data o un nod a'i anfon at y cleient.
Mae yna dipyn o weinyddion eu hunain, felly gadewch i ni edrych ar y lleiaf Dell EMC ECS EX300. Mae'n dechrau ar 60Tb, gyda'r gallu i dyfu hyd at 1,5Pb. Ac mae ei frawd hŷn Dell EMC ECS EX3000 eisoes yn caniatáu ichi storio cymaint â 8,6Pb fesul rac.
Defnyddio
Yn dechnegol, gellir defnyddio Dell ECS CE mor fawr ag y dymunir. Beth bynnag, ni wnes i ddod o hyd i gyfyngiadau penodol. Fodd bynnag, mae'r holl raddfa'n cael ei wneud yn gyfleus trwy glonio'r nod cyntaf un y mae angen inni:
- 8 vCPU
- 64GB RAM
- 16GB ar gyfer system weithredu
- 1TB yn uniongyrchol i'w storio
- Y datganiad diweddaraf o CentOS minimal
Mae hwn yn opsiwn ar gyfer yr achos pan fyddwch am osod popeth eich hun o'r cychwyn cyntaf. I ni, nid yw'r opsiwn hwn yn berthnasol, oherwydd. Byddaf yn defnyddio delwedd OVA i'w defnyddio.
Ond beth bynnag, mae'r gofynion yn ddrwg iawn hyd yn oed ar gyfer un nod, ac os ydych chi'n dilyn llythyren y gyfraith yn llym, yna mae angen pedwar nod o'r fath arnoch chi.
Fodd bynnag, mae datblygwyr ECS CE yn byw yn y byd go iawn, ac mae'r gosodiad yn llwyddiannus hyd yn oed gydag un nod, a'r gofynion sylfaenol yw:
- 4 vCPU
- 16 GB RAM
- 16 GB ar gyfer system weithredu
- 104 GB hunan storio
Yr adnoddau hyn sydd eu hangen i ddefnyddio delwedd yr OVA. Eisoes yn llawer mwy trugarog a realistig.
Gellir cymryd y nod gosod ei hun oddi wrth y swyddog . Mae yna hefyd ddogfennaeth fanwl ar ddefnyddio popeth-mewn-un, ond gallwch chi hefyd ddarllen ar y swyddog . Felly, ni fyddwn yn canolbwyntio ar ddefnyddio OVA yn fanwl, nid oes unrhyw driciau. Y prif beth - peidiwch ag anghofio cyn ei gychwyn, naill ai ehangu'r ddisg i'r cyfaint a ddymunir, neu atodi'r rhai angenrheidiol.
Rydyn ni'n cychwyn y peiriant, yn agor y consol ac yn defnyddio'r credoau rhagosodedig gorau:
- mewngofnodi: admin
- Cyfrinair: changeme
Yna rydyn ni'n rhedeg sudo nmtui ac yn ffurfweddu'r rhyngwyneb rhwydwaith - IP / mwgwd, DNS a giât. Gan gofio nad oes unrhyw offer net yn CentOS leiaf, rydym yn gwirio'r gosodiadau trwy ip addr.
A chan mai dim ond y dewr sy'n goncro'r moroedd, rydyn ni'n gwneud y wybodaeth ddiweddaraf, ac ar ôl hynny rydyn ni'n ailgychwyn. Mewn gwirionedd mae'n eithaf diogel. gwneir yr holl ddefnydd trwy lyfrau chwarae, ac mae'r holl becynnau docwyr pwysig wedi'u cloi i'r fersiwn gyfredol.
Nawr mae'n bryd golygu'r sgript gosod. Dim ffenestri hardd na ffug-UI i chi - mae popeth trwy'ch hoff olygydd testun. Yn dechnegol yn unig, mae dwy ffordd: gallwch chi redeg pob gorchymyn â llaw neu redeg y cyflunydd videploy ar unwaith. Yn syml, bydd yn agor y ffurfwedd yn vim, ac ar ôl gadael bydd yn dechrau ei wirio. Ond nid yw'n ddiddorol symleiddio'ch bywyd yn fwriadol, felly gadewch i ni weithredu dau orchymyn arall. Er nad yw'n gwneud unrhyw synnwyr, fe wnes i eich rhybuddio =)
Felly, rydym yn gwneud vim ECS-CommunityEdition/deploy.xml ac yn gwneud y newidiadau lleiaf posibl fel bod ECS yn troi ymlaen ac yn gweithio. Gellir byrhau'r rhestr o baramedrau, ond fe wnes i fel hyn:
- licensed_accepted : true Does dim rhaid i chi ei newid, yna wrth ei ddefnyddio gofynnir yn benodol i chi ei dderbyn a dangos ymadrodd neis. Gallai hyd yn oed fod yn wy Pasg.
- Uncomment y llinellau autonames: ac arferiad: Rhowch o leiaf un enw dymunol ar gyfer y nod - bydd enw gwesteiwr yn cael ei ddisodli ag ef yn ystod y broses osod.
- install_node: 192.168.1.1 Nodwch IP go iawn y nod. Yn ein hachos ni, rydym yn nodi'r un peth ag yn nmtui
- dns_domain: rhowch eich parth.
- dns_servers: rhowch eich dns.
- ntp_servers: Gellir pennu unrhyw un. Cymerais yr un cyntaf o'r pwll 0.pool.ntp.org (daeth yn 91.216.168.42)
- awto-enwi: arfer Os na chaiff sylw, Luna fydd enw'r lleuad.
- ecs_block_devices:
/ dev / sdb
Am ryw reswm anhysbys, efallai nad oes dyfais storio bloc /dev/vda yn bodoli - pyllau_storio:
aelodau:
192.168.1.1 Yma eto rydym yn nodi IP gwirioneddol y nod - ecs_block_devices:
/dev/sdb Rydym yn ailadrodd gweithrediad torri dyfeisiau nad ydynt yn bodoli.
Yn gyffredinol, disgrifir y ffeil gyfan yn fanwl iawn yn ond pwy a'i darlleno mewn amser mor gythryblus. Mae hefyd wedi'i ysgrifennu yno mai'r lleiafswm sy'n ddigonol yw nodi'r IP a'r mwgwd, ond yn fy labordy ni ddechreuodd set o'r fath yn dda, a bu'n rhaid i mi ei ehangu i'r un a nodir uchod.
Ar ôl gadael y golygydd, mae angen i chi redeg update_deploy /home/admin/ECS-CommunityEdition/deploy.yml, ac os gwneir popeth yn gywir, bydd hyn yn cael ei adrodd yn benodol.
Yna mae'n rhaid i chi ddechrau videploy o hyd, aros i'r amgylchedd ddiweddaru, a gallwch chi ddechrau'r gosodiad ei hun gyda'r gorchymyn ova-step1, ac ar ôl ei gwblhau'n llwyddiannus, y gorchymyn ova-step2. Pwysig: peidiwch â stopio sgriptiau â llaw! Gall rhai camau gymryd amser hir, cymryd mwy o amser na'r cynnig cyntaf, ac edrych fel bod popeth wedi torri. Mewn unrhyw achos, rhaid i chi aros i'r sgript gael ei chwblhau mewn ffordd naturiol. Ar y diwedd, dylech weld rhywbeth fel hyn.
Nawr, yn olaf, gallwn agor panel rheoli WebUI gan ddefnyddio'r IP rydyn ni'n ei wybod. Os na chafodd ei newid yn y cam ffurfweddu, yna root/ChangeMe fydd y cyfrif diofyn. Gallwch hyd yn oed ddefnyddio ein storfa sy'n gydnaws â S3 ar unwaith. Mae ar gael ar borthladdoedd 9020 ar gyfer HTTP, a 9021 ar gyfer HTTPS. Eto, os nad oes dim wedi ei newid, yna access_key: object_admin1 a secret_key: ChangeMeChangeMeChangeMeChangeMeChangeMe.
Ond gadewch i ni beidio â mynd ar y blaen i ni ein hunain a dechrau mewn trefn.
Ar y mewngofnodi cyntaf, gofynnir yn rymus i chi newid y cyfrinair i un digonol, sy'n hollol gywir. Mae'r prif ddangosfwrdd yn hynod o glir, felly gadewch i ni wneud rhywbeth mwy diddorol nag egluro'r metrigau amlwg. Er enghraifft, gadewch i ni greu defnyddiwr y byddwn yn ei ddefnyddio i gael mynediad i'r ystorfa. Ym myd darparwyr gwasanaethau, gelwir y rhain yn denantiaid. Gwneir hyn yn Rheoli > Defnyddwyr > Defnyddiwr Gwrthrych Newydd
Wrth greu defnyddiwr, gofynnir i ni nodi gofod enw. Yn dechnegol, nid oes dim yn ein hatal rhag eu cychwyn cymaint ag y bydd defnyddwyr. Ac i'r gwrthwyneb. Mae hyn yn caniatáu i adnoddau gael eu rheoli'n annibynnol ar gyfer pob tenant.
Yn unol â hynny, rydym yn dewis y swyddogaethau sydd eu hangen arnom ac yn cynhyrchu allweddi defnyddiwr. Bydd S3/Atmos yn ddigon i mi. A pheidiwch ag anghofio arbed yr allwedd 😉
Mae'r defnyddiwr wedi'i greu, nawr mae'n bryd iddo ddewis y bwced. Ewch i Rheoli > Bwced a llenwch y meysydd gofynnol. Mae popeth yn syml yma.
Nawr mae gennym bopeth yn barod ar gyfer defnydd eithaf ymladd o'n storfa S3.
Sefydlu Veeam
Felly, fel y cofiwn, un o brif gymwysiadau storio gwrthrychau yw storio gwybodaeth yn y tymor hir nad yw'n cael ei chyrchu'n aml. Enghraifft ddelfrydol yw'r angen i storio copïau wrth gefn mewn safle anghysbell. Yn Veeam Backup & Replication, gelwir y nodwedd hon yn Haen Cynhwysedd.
Gadewch i ni ddechrau'r setup trwy ychwanegu ein Dell ECS CE i ryngwyneb Veeam. Ar y tab Seilwaith wrth gefn, lansiwch y dewin ar gyfer ychwanegu ystorfa newydd a dewiswch yr eitem Gwrthrych Storio.
Rydym yn dewis ar gyfer beth y dechreuwyd popeth - S3 Compatible.
Yn y ffenestr sy'n ymddangos, ysgrifennwch yr enw a ddymunir ac ewch i'r cam Cyfrif. Yma mae angen i chi nodi'r pwynt Gwasanaeth yn y ffurflen , gellir gadael y rhanbarth fel y mae, a gellir ychwanegu'r defnyddiwr a grëwyd. Mae angen gweinydd giât os yw'ch storfa wedi'i lleoli ar safle anghysbell, ond mae hwn eisoes yn bwnc optimeiddio seilwaith ac erthygl ar wahân, felly gallwch chi ei hepgor yn ddiogel yma.
Os yw popeth wedi'i nodi a'i ffurfweddu'n gywir, bydd rhybudd am y dystysgrif yn ymddangos ac yna ffenestr gyda bwced, lle gallwch chi greu ffolder ar gyfer ein ffeiliau.
Rydyn ni'n pasio'r dewin i'r diwedd ac yn mwynhau'r canlyniad.
Y cam nesaf yw naill ai creu Storfa Wrth Gefn Graddfa Newydd, neu ychwanegu ein S3 i'r un presennol - bydd yn cael ei ddefnyddio fel Haen Cynhwysedd ar gyfer storio archifau. Nid yw'r swyddogaeth i ddefnyddio ystorfeydd sy'n gydnaws â S3 yn uniongyrchol, fel ystorfa reolaidd, yn y datganiad cyfredol. Mae gormod o broblemau nad ydynt yn amlwg i hyn gael eu datrys, ond gall popeth fod.
Rydyn ni'n mynd i mewn i osodiadau'r ystorfa ac yn troi'r Haen Cynhwysedd ymlaen. Mae popeth yn dryloyw yno, ond mae naws ddiddorol: os ydych chi am i'r holl ddata gael ei anfon i storio gwrthrychau cyn gynted â phosibl, gosodwch ef i 0 diwrnod.
Ar ôl mynd trwy'r dewin, os nad ydych chi am aros, gallwch chi wasgu ctrl + RMB ar y storfa, rhedeg y swydd Haenu yn rymus a gwylio'r graffiau'n cropian.
Dyna i gyd am y tro. Credaf imi ymdopi â’r dasg o ddangos nad yw storio blociau mor frawychus ag y credir yn gyffredin. Oes, atebion ac opsiynau ar gyfer gweithredu wagen a throli bach, ond mae'n amhosibl cynnwys popeth mewn un erthygl. Felly gadewch i ni rannu ein profiad yn y sylwadau.
Ffynhonnell: hab.com