S3 whakahau rokiroki ahanoa i whakamaoritia he tuhinga e pa ana ki nga paearu he mea nui i te wa e whiriwhiri ana i te rokiroki taonga. E whai ake nei te tuhinga mai i te tirohanga a te kaituhi.
Ina tae mai ki te rokiroki ahanoa, kotahi noa te whakaaro o te tangata: te utu mo ia TB/GB. Ae ra, he mea nui tenei ine, engari ka hangai te huarahi ki te taha kotahi, ka orite te rokiroki taonga me te taputapu rokiroki purongo. I tua atu, ka whakaitihia e tenei huarahi te hiranga o te rokiroki ahanoa mo te kohinga hangarau hinonga.
I te wa e whiriwhiri ana i te rokiroki ahanoa, me aro koe ki nga ahuatanga e rima:
- mahi;
- tauineine;
- S3 hototahi;
- whakautu ki nga rahunga;
- tapatahi.
Ko enei ahuatanga e rima he inenga hou mo te rokiroki taonga, me te utu. Kia titiro tatou ki a ratou katoa.
Te whai hua
He kore mahi nga toa taonga tuku iho. Ko nga kaiwhakarato ratonga i patu i nga wa katoa ki te whai i nga utu iti. Heoi, ki te rokiroki ahanoa hou he rereke nga mea.
He maha nga punaha rokiroki e tata ana, neke atu ranei i te tere o Hadoop. Nga whakaritenga hou mo te panui me te tuhi tere: mai i te 10 GB / s mo nga puku pakeke, ki te 35 GB / s mo NVMe.
He rawaka tenei mahinga mo te Spark, Presto, Tensorflow, Teradata, Vertica, Splunk me etahi atu anga rorohiko hou i roto i te puranga tātaritanga. Ko te mea kei te whirihorahia nga papaunga raraunga MPP mo te rokiroki ahanoa e tohu ana kei te kaha haere te whakamahi hei rokiroki tuatahi.
Mena kaore to punaha rokiroki e whakarato i te tere e hiahia ana koe, kaore e taea e koe te whakamahi i nga raraunga me te tango i te uara mai i a koe. Ahakoa ka tikina e koe nga raraunga mai i te rokiroki ahanoa ki roto i te anga tukatuka mahara-roto, ka hiahia tonu koe i te bandwidth hei whakawhiti i nga raraunga ki te mahara. Ko nga toa taonga tuku iho kaore e ranea.
Koinei te kaupapa matua: ko te inenga mahi hou ko te urunga, ehara i te tohe. E hiahiatia ana mo nga raraunga i te tauine me te tikanga i roto i nga hanganga raraunga hou.
Ahakoa ko nga tohu tohu he huarahi pai ki te whakatau i nga mahi, kaore e taea te ine tika i mua i te whakahaere i te tono i roto i te taiao. I muri noa iho ka taea e koe te kii kei hea te kohungahunga: i te rorohiko, i nga kopae, i te whatunga, i te taumata rorohiko ranei.
Tauineine
Ko te tauineine e tohu ana ki te maha o nga petabyte e uru ana ki te mokowāingoa kotahi. Ko nga mea e kii ana nga kaihoko he ngawari te whakahiatotanga, ko ta ratou kaore e kii ko te mea i a raatau i te tauine, ka pakaru nga punaha monolithic nui, he uaua, he koretake, he utu nui.
Ko te inenga hou mo te tauineine ko te maha o nga mokowā ingoa me nga kiritaki ka taea e koe te mahi. Ka tangohia tika te inenga mai i nga hyperscalers, he iti nga poraka whare rokiroki engari ka tau ki te piriona wae. I te nuinga o te waa, he ine kapua tenei.
I te wa e iti ana nga poraka hangahanga, ka ngawari ake te arotau mo te haumarutanga, te mana uru, te whakahaere kaupapa here, te whakahaere o te ora, me nga whakahou kore-whakararuraru. Na te mutunga ka whakarite i te hua. Ko te rahi o te paraka hanga whare he mahi na te mana whakahaere o te rohe kore, he pehea te hanga o nga punaha kaha.
He maha nga ahuatanga o te reti-maha. Ahakoa e korero ana te taha ki te pehea e tukuna ai e nga whakahaere te uru ki nga raraunga me nga tono, e pa ana ki nga tono ake me te arorau kei muri i te wehe i a raatau mai i a raatau.
Ko nga ahuatanga o te huarahi hou ki nga kaihoko maha:
- I roto i te wa poto, ka tipu te maha o nga kaihoko mai i nga rau ki te maha miriona.
- Ka noho mokemoke nga kaihoko mai i a raatau ano. Ma tenei ka taea e ratou te whakahaere i nga momo putanga rereke o te raupaparorohiko kotahi me te penapena taonga me nga whirihoranga rereke, whakaaetanga, ahuatanga, haumaru me nga taumata tiaki. Me tika tenei ina tauine ana ki nga tūmau hou, whakahōu, me te matawhenua.
- Ko te rokiroki ka taea te whakarereke, ka whakaratohia nga rauemi i runga i te tono.
- Ko ia mahinga e whakahaerehia ana e te API me te mahi aunoa me te kore e wawaohia e te tangata.
- Ka taea te whakahaere i nga punaha ki roto i nga ipu me te whakamahi i nga punaha whakahiato paerewa penei i a Kubernetes.
S3 hototahi
Ko te Amazon S3 API te paerewa pono mo te rokiroki ahanoa. Ko ia kaihoko rorohiko rokiroki ahanoa e kii ana he hototahi ki a ia. Ko te hototahi ki te S3 he ruarua: kua tino whakatinanahia, kaore ranei.
I roto i te mahi, he rau, he mano ranei o nga ahuatanga o te taha e raru ana i te wa e whakamahi ana i te rokiroki taonga. Ina koa mai i nga kaiwhakarato rorohiko me nga ratonga rangatira. Ko ona take whakamahi matua he whakapuranga tika, he taapiri ranei, na reira he iti noa nga take ki te karanga i te API, he rite tonu nga keehi whakamahi.
He nui nga painga o nga punaha punaha tuwhera. Ka kapi i te nuinga o nga ahuatanga o te taha, na te nui me te maha o nga tono, nga punaha whakahaere, me nga hoahoanga taputapu.
He mea nui tenei katoa mo nga kaiwhakawhanake tono, na reira he pai ki te whakamatau i te tono me nga kaiwhakarato rokiroki. Ko te puna tuwhera he ngawari ake te mahi—he maamaa ake te maarama ko tehea papaaho e tika ana mo to tono. Ka taea te whakamahi i te kaiwhakarato hei waahi urunga kotahi ki te rokiroki, te tikanga ka tutuki i o hiahia.
Ko te tikanga o te puna tuwhera: kaore e herea nga tono ki tetahi kaihoko me te maarama ake. Ma tenei ka whakarite i te huringa ora roa.
Me etahi atu korero mo te puna tuwhera me te S3.
Mena kei te whakahaere koe i tetahi tono raraunga nui, ka whakapai ake a S3 SELECT i te mahi me te whai hua ma te raupapa o te rahi. Ka mahia tenei ma te whakamahi i te SQL hei tiki i nga mea e hiahia ana koe mai i te rokiroki.
Ko te kaupapa matua ko te tautoko mo nga panui peere. Ko nga whakamohiotanga peere ka whakahaere i te rorohiko kore-tumau, he waahanga nui o tetahi hoahoanga microservice ka tukuna hei ratonga. I te mea ko te rokiroki ahanoa he putunga kapua, he mea nui tenei kaha ina whakamahia te rokiroki ahanoa e nga tono a-kapua.
Ka mutu, me tautoko te whakatinanatanga S3 i nga API whakamunatanga taha-tumau Amazon S3: SSE-C, SSE-S3, SSE-KMS. He pai ake, ka tautoko a S3 i te whakamarumaru tamper e tino haumaru ana.
Te whakautu ki nga rahunga
Ko te inenga e warewarehia ana ko te pehea te whakahaere a te punaha i nga hapa. He maha nga take ka paheke, a me whakahaere katoa e te rokiroki ahanoa.
Hei tauira, kotahi te waahi o te kore, ko te inenga o tenei he kore.
Kia aroha mai, he maha nga punaha rokiroki ahanoa e whakamahi ana i nga pona motuhake me whakaahei kia pai te mahi a te tautau. Kei roto i enei ko nga ingoa ingoa, nga kaimau metadata ranei - ka puta he waahi kotahi o te kore.
Ahakoa he maha nga waahi o te korenga, ko te kaha ki te tu atu i nga raru kino he mea nui. Ka rahua nga kopae, ka rahua nga tūmau. Ko te mea nui ko te hanga rorohiko i hangaia hei hapai i te rahunga hei ahua noa. Ki te rahua te kōpae, te node ranei, ka mahi tonu taua rorohiko me te kore huringa.
Ko te whakamarutanga o roto mai i te whakakorenga raraunga me te whakahekenga raraunga ka taea e koe te ngaro te maha o nga kopae, nga pona ranei i te mea he poraka parerite koe—te nuinga o te haurua o nga kōpae. Na ka kore e taea e te rorohiko te whakahoki raraunga.
He iti noa te whakamatautau i te ngoikoretanga i raro i te utaina, engari he mea whakahau enei whakamatautau. Ko te whakatauira i te korenga o te uta ka whakaatu i nga utu katoa i puta i muri i te rahunga.
Te riterite
Ko te kaute rite o te 100% ka kiia hoki ko te tino rite. Ko te riterite tetahi waahanga nui o tetahi punaha rokiroki, engari he onge te riterite. Hei tauira, ko te Amazon S3 ListObject kaore i te tino rite, he rite noa i te mutunga.
He aha te tikanga o te tino rite? Mo nga mahi katoa whai muri i te mahi PUT kua whakapumautia, me mahi enei e whai ake nei:
- Ka kitea te uara kua whakahoutia ina panui ana mai i tetahi node.
- Ka parea te whakahōu ki te korenga o te korenga o te node.
Ko te tikanga mena ka toia e koe te mono ki waenganui o te rekoata, kare he mea e ngaro. Kaore te punaha e whakahoki mai i nga raraunga kua kino, kua tawhito ranei. He pae teitei tenei e pa ana ki nga ahuatanga maha, mai i nga tono tauwhitinga ki te taapiri me te whakaora.
mutunga
He inenga rokiroki ahanoa hou enei e whakaata ana i nga tauira whakamahi i roto i nga whakahaere o enei ra, ko te mahi, te rite, te tauineine, nga rohe hapa me te hototahi S3 ko nga poraka hanga mo nga tono kapua me te tātari raraunga nui. Ka tūtohu ahau ki te whakamahi i tenei rarangi hei taapiri i te utu i te wa e hanga ana i nga kohinga raraunga hou.
Mō te rokiroki ahanoa Mail.ru Cloud Solutions: .
He aha atu hei panui:
- .
- .
- .
Source: will.com