🥇 រង្វាស់ផ្ទុកវត្ថុថ្មី

Flying Fortress ដោយ Nele-Diel

ពាក្យបញ្ជាផ្ទុកវត្ថុ S3 ឃ្លាំងផ្ទុកពពក Mail.ru បកប្រែអត្ថបទអំពីលក្ខណៈវិនិច្ឆ័យណាដែលសំខាន់នៅពេលជ្រើសរើសកន្លែងផ្ទុកវត្ថុ។ ខាងក្រោមនេះគឺជាអត្ថបទពីទស្សនៈរបស់អ្នកនិពន្ធ។

នៅពេលនិយាយអំពីការផ្ទុកវត្ថុ មនុស្សជាធម្មតាគិតតែអំពីរឿងមួយប៉ុណ្ណោះ៖ តម្លៃក្នុងមួយ TB/GB ។ ជាការពិតណាស់ មាត្រដ្ឋាននេះមានសារៈសំខាន់ ប៉ុន្តែវាធ្វើឱ្យវិធីសាស្រ្តមួយចំហៀង និងស្មើនឹងការផ្ទុកវត្ថុជាមួយនឹងឧបករណ៍ផ្ទុកប័ណ្ណសារ។ លើសពីនេះ វិធីសាស្រ្តនេះកាត់បន្ថយសារៈសំខាន់នៃការផ្ទុកវត្ថុសម្រាប់ជង់បច្ចេកវិទ្យាសហគ្រាស។

នៅពេលជ្រើសរើសកន្លែងផ្ទុកវត្ថុ អ្នកគួរតែយកចិត្តទុកដាក់លើលក្ខណៈប្រាំយ៉ាង៖

ការសម្តែង;
ការធ្វើមាត្រដ្ឋាន;
S3 ឆបគ្នា;
ការឆ្លើយតបទៅនឹងការបរាជ័យ;
សុចរិតភាព។

លក្ខណៈទាំងប្រាំនេះគឺជារង្វាស់ថ្មីសម្រាប់ការរក្សាទុកវត្ថុរួមជាមួយនឹងតម្លៃ។ តោះមើលពួកវាទាំងអស់គ្នា។

ផលិតភាព

ហាងលក់វត្ថុបុរាណខ្វះដំណើរការ។ អ្នកផ្តល់សេវាតែងតែលះបង់វាក្នុងការស្វែងរកតម្លៃទាប។ ទោះជាយ៉ាងណាក៏ដោយជាមួយនឹងការផ្ទុកវត្ថុទំនើបអ្វីៗគឺខុសគ្នា។

ប្រព័ន្ធផ្ទុកផ្សេងៗខិតជិត ឬលើសពីល្បឿនរបស់ Hadoop ។ តម្រូវការទំនើបសម្រាប់ល្បឿនអាន និងសរសេរ៖ ចាប់ពី 10 GB/s សម្រាប់ hard drive រហូតដល់ 35 GB/s សម្រាប់ NVMe។

កម្រិតបញ្ជូននេះគឺគ្រប់គ្រាន់សម្រាប់ Spark, Presto, Tensorflow, Teradata, Vertica, Splunk និងក្របខ័ណ្ឌកុំព្យូទ័រទំនើបផ្សេងទៀតនៅក្នុងជង់វិភាគ។ ការពិតដែលថាមូលដ្ឋានទិន្នន័យ MPP កំពុងត្រូវបានរៀបចំសម្រាប់ការផ្ទុកវត្ថុបង្ហាញថាវាកំពុងត្រូវបានប្រើប្រាស់កាន់តែខ្លាំងឡើងជាកន្លែងផ្ទុកចម្បង។

ប្រសិនបើប្រព័ន្ធផ្ទុកទិន្នន័យរបស់អ្នកមិនផ្តល់ល្បឿនដែលអ្នកត្រូវការទេ អ្នកមិនអាចប្រើប្រាស់ទិន្នន័យ និងទាញយកតម្លៃពីវាបានទេ។ ទោះបីជាអ្នកទាញយកទិន្នន័យពីការផ្ទុកវត្ថុទៅក្នុងរចនាសម្ព័ន្ធដំណើរការក្នុងអង្គចងចាំក៏ដោយ អ្នកនឹងនៅតែត្រូវការកម្រិតបញ្ជូនដើម្បីផ្ទេរទិន្នន័យទៅ និងពីអង្គចងចាំ។ ហាងលក់វត្ថុបុរាណមិនមានវាគ្រប់គ្រាន់ទេ។

នេះគឺជាចំណុចសំខាន់៖ រង្វាស់នៃការអនុវត្តថ្មីគឺឆ្លងកាត់ មិនមែនភាពយឺតយ៉ាវទេ។ វាត្រូវបានទាមទារសម្រាប់ទិន្នន័យតាមមាត្រដ្ឋាន និងជាបទដ្ឋាននៅក្នុងហេដ្ឋារចនាសម្ព័ន្ធទិន្នន័យទំនើប។

ខណៈដែលការកំណត់ជាវិធីល្អក្នុងការកំណត់ការអនុវត្ត វាមិនអាចត្រូវបានវាស់វែងបានត្រឹមត្រូវមុនពេលដំណើរការកម្មវិធីក្នុងបរិស្ថាន។ មានតែបន្ទាប់ពីវាប៉ុណ្ណោះដែលអ្នកអាចនិយាយបានថាកន្លែងណាដែលជាប់គាំងពិតប្រាកដ: នៅក្នុងកម្មវិធី ថាស បណ្តាញ ឬនៅកម្រិតកុំព្យូទ័រ។

លទ្ធភាពធ្វើមាត្រដ្ឋាន

លទ្ធភាពធ្វើមាត្រដ្ឋាន សំដៅលើចំនួន petabytes ដែលសមនឹងទំហំឈ្មោះមួយ។ អ្វីដែលអ្នកលក់អះអាងថាជាការធ្វើមាត្រដ្ឋានងាយស្រួល អ្វីដែលពួកគេមិននិយាយគឺថានៅពេលដែលពួកគេធ្វើមាត្រដ្ឋាន ប្រព័ន្ធ monolithic ដ៏ធំក្លាយជាផុយស្រួយ ស្មុគស្មាញ មិនស្ថិតស្ថេរ និងមានតម្លៃថ្លៃ។

ម៉ែត្រថ្មីសម្រាប់ការធ្វើមាត្រដ្ឋានគឺជាចំនួនចន្លោះឈ្មោះ ឬអតិថិជនដែលអ្នកអាចបម្រើបាន។ ម៉ែត្រត្រូវបានយកដោយផ្ទាល់ពី hyperscalers ដែលប្លុកអគារផ្ទុកមានទំហំតូច ប៉ុន្តែមានទំហំដល់រាប់ពាន់លានគ្រឿង។ ជាទូទៅនេះគឺជាម៉ែត្រពពក។

នៅពេលដែលប្លុកអាគារមានទំហំតូច ពួកវាមានភាពងាយស្រួលក្នុងការបង្កើនប្រសិទ្ធភាពសម្រាប់សុវត្ថិភាព ការគ្រប់គ្រងការចូលប្រើ ការគ្រប់គ្រងគោលនយោបាយ ការគ្រប់គ្រងវដ្តជីវិត និងការអាប់ដេតដែលមិនមានការរំខាន។ ហើយទីបំផុតធានាផលិតភាព។ ទំហំនៃប្លុកអគារគឺជាមុខងារនៃការគ្រប់គ្រងនៃតំបន់បរាជ័យ ដែលជារបៀបដែលប្រព័ន្ធធន់ខ្ពស់ត្រូវបានសាងសង់។

ការជួលច្រើនមានលក្ខណៈច្រើន។ ខណៈពេលដែលវិមាត្រនិយាយអំពីរបៀបដែលអង្គការផ្តល់ការចូលប្រើទិន្នន័យ និងកម្មវិធី វាក៏សំដៅទៅលើកម្មវិធីខ្លួនឯង និងតក្កវិជ្ជានៅពីក្រោយការញែកពួកវាចេញពីគ្នាទៅវិញទៅមក។

លក្ខណៈនៃវិធីសាស្រ្តទំនើបចំពោះអតិថិជនច្រើន៖

ក្នុងរយៈពេលដ៏ខ្លី ចំនួនអតិថិជនអាចកើនឡើងពីច្រើនរយទៅច្រើនលាននាក់។
អតិថិជនគឺដាច់ឆ្ងាយពីគ្នាទៅវិញទៅមក។ នេះអនុញ្ញាតឱ្យពួកគេដំណើរការកំណែផ្សេងគ្នានៃកម្មវិធីដូចគ្នា និងរក្សាទុកវត្ថុដែលមានការកំណត់រចនាសម្ព័ន្ធ ការអនុញ្ញាត លក្ខណៈពិសេស សុវត្ថិភាព និងកម្រិតថែទាំខុសៗគ្នា។ នេះគឺចាំបាច់នៅពេលធ្វើមាត្រដ្ឋានទៅម៉ាស៊ីនមេ បច្ចុប្បន្នភាព និងភូមិសាស្ត្រ។
ការផ្ទុកគឺអាចបត់បែនបាន ធនធានត្រូវបានផ្តល់ជូនតាមតម្រូវការ។
ប្រតិបត្តិការនីមួយៗត្រូវបានគ្រប់គ្រងដោយ API ហើយដំណើរការដោយស្វ័យប្រវត្តិដោយគ្មានការអន្តរាគមន៍ពីមនុស្ស។
កម្មវិធីអាចត្រូវបានបង្ហោះនៅក្នុងកុងតឺន័រ និងប្រើប្រព័ន្ធរៀបចំស្តង់ដារដូចជា Kubernetes ជាដើម។

S3 ឆបគ្នា។

Amazon S3 API គឺជាស្តង់ដារជាក់ស្តែងសម្រាប់ការរក្សាទុកវត្ថុ។ អ្នកលក់កម្មវិធីផ្ទុកវត្ថុនីមួយៗទាមទារភាពឆបគ្នាជាមួយវា។ ភាពឆបគ្នាជាមួយ S3 គឺជាប្រព័ន្ធគោលពីរ៖ ទាំងវាត្រូវបានអនុវត្តយ៉ាងពេញលេញ ឬវាមិនមែន។

នៅក្នុងការអនុវត្ត មានសេណារីយ៉ូគែមរាប់រយ ឬរាប់ពាន់ ដែលមានអ្វីខុសនៅពេលប្រើការផ្ទុកវត្ថុ។ ជាពិសេសពីអ្នកផ្តល់កម្មវិធី និងសេវាកម្មដែលមានកម្មសិទ្ធិ។ ករណីប្រើប្រាស់ចម្បងរបស់វាគឺការរក្សាទុកដោយផ្ទាល់ ឬការបម្រុងទុក ដូច្នេះមានហេតុផលមួយចំនួនដើម្បីហៅ API ករណីប្រើប្រាស់គឺដូចគ្នាបេះបិទ។

កម្មវិធីប្រភពបើកចំហមានអត្ថប្រយោជន៍យ៉ាងសំខាន់។ វាគ្របដណ្តប់លើសេណារីយ៉ូគែមភាគច្រើន ដោយបានផ្ដល់ឱ្យនូវទំហំ និងភាពខុសគ្នានៃកម្មវិធី ប្រព័ន្ធប្រតិបត្តិការ និងស្ថាបត្យកម្មផ្នែករឹង។

ទាំងអស់នេះមានសារៈសំខាន់សម្រាប់អ្នកអភិវឌ្ឍន៍កម្មវិធី ដូច្នេះវាមានតម្លៃសាកល្បងកម្មវិធីជាមួយអ្នកផ្តល់កន្លែងផ្ទុក។ ប្រភពបើកចំហធ្វើឱ្យដំណើរការកាន់តែងាយស្រួល - វាកាន់តែងាយស្រួលក្នុងការយល់ថាវេទិកាណាមួយដែលត្រឹមត្រូវសម្រាប់កម្មវិធីរបស់អ្នក។ អ្នកផ្តល់សេវាអាចត្រូវបានប្រើជាចំណុចតែមួយនៃការចូលទៅក្នុងការផ្ទុក មានន័យថាវានឹងបំពេញតាមតម្រូវការរបស់អ្នក។

ប្រភពបើកចំហមានន័យថា៖ កម្មវិធីមិនត្រូវបានភ្ជាប់ជាមួយអ្នកលក់ទេ ហើយមានតម្លាភាពជាង។ នេះធានានូវវដ្តជីវិតកម្មវិធីដ៏វែង។

និងកំណត់ចំណាំមួយចំនួនទៀតអំពីប្រភពបើកចំហ និង S3 ។

ប្រសិនបើអ្នកកំពុងដំណើរការកម្មវិធីទិន្នន័យធំ S3 SELECT បង្កើនប្រសិទ្ធភាព និងប្រសិទ្ធភាពតាមលំដាប់លំដោយ។ វាធ្វើដូចនេះដោយប្រើ SQL ដើម្បីទាញយកតែវត្ថុដែលអ្នកត្រូវការពីការផ្ទុក។

ចំណុចសំខាន់គឺការគាំទ្រសម្រាប់ការជូនដំណឹងអំពីធុង។ ការជូនដំណឹងអំពីធុងជួយសម្រួលដល់ការគណនាគ្មានម៉ាស៊ីនមេ ដែលជាធាតុផ្សំដ៏សំខាន់នៃស្ថាបត្យកម្មមីក្រូសេវាកម្មណាមួយដែលត្រូវបានចែកចាយជាសេវាកម្ម។ ដោយសារការផ្ទុកវត្ថុគឺមានប្រសិទ្ធភាពក្នុងការផ្ទុកលើពពក សមត្ថភាពនេះក្លាយជាកត្តាសំខាន់នៅពេលដែលការផ្ទុកវត្ថុត្រូវបានប្រើប្រាស់ដោយកម្មវិធីផ្អែកលើពពក។

ជាចុងក្រោយ ការអនុវត្ត S3 ត្រូវតែគាំទ្រ APIs ការអ៊ិនគ្រីបផ្នែកខាងម៉ាស៊ីនមេ Amazon S3: SSE-C, SSE-S3, SSE-KMS ។ កាន់តែល្អ S3 គាំទ្រការការពារការរំខានដែលពិតជាមានសុវត្ថិភាព។

ការឆ្លើយតបទៅនឹងការបរាជ័យ

រង្វាស់ដែលប្រហែលជាត្រូវបានគេមើលរំលងជាញឹកញាប់គឺរបៀបដែលប្រព័ន្ធដោះស្រាយការបរាជ័យ។ ការបរាជ័យកើតឡើងដោយសារហេតុផលផ្សេងៗគ្នា ហើយការផ្ទុកវត្ថុត្រូវតែដោះស្រាយវាទាំងអស់។

ឧទាហរណ៍ មានចំណុចតែមួយនៃការបរាជ័យ មាត្រដ្ឋាននេះគឺសូន្យ។

ជាអកុសល ប្រព័ន្ធផ្ទុកវត្ថុជាច្រើនប្រើថ្នាំងពិសេសដែលត្រូវតែបើកសម្រាប់ចង្កោមដំណើរការត្រឹមត្រូវ។ ទាំងនេះរួមបញ្ចូលថ្នាំងឈ្មោះ ឬម៉ាស៊ីនមេទិន្នន័យមេតា - វាបង្កើតចំណុចតែមួយនៃការបរាជ័យ។

ទោះបីជាមានចំណុចជាច្រើននៃការបរាជ័យក៏ដោយ សមត្ថភាពក្នុងការទប់ទល់នឹងការបរាជ័យដ៏មហន្តរាយគឺសំខាន់បំផុត។ ថាសបរាជ័យ ម៉ាស៊ីនមេបរាជ័យ។ គន្លឹះគឺបង្កើតកម្មវិធីដែលត្រូវបានរចនាឡើងដើម្បីដោះស្រាយការបរាជ័យជាលក្ខខណ្ឌធម្មតា។ ប្រសិនបើថាស ឬថ្នាំងបរាជ័យ កម្មវិធីបែបនេះនឹងបន្តដំណើរការដោយគ្មានការផ្លាស់ប្តូរ។

ការការពារដែលភ្ជាប់មកជាមួយប្រឆាំងនឹងការលុបទិន្នន័យ និងការរិចរិលទិន្នន័យធានាថាអ្នកអាចបាត់បង់ថាស ឬថ្នាំងជាច្រើនដូចដែលអ្នកមានប្លុកស្មើគ្នា — ជាធម្មតាពាក់កណ្តាលនៃថាស។ មានតែពេលនោះទេដែលកម្មវិធីនឹងមិនអាចត្រឡប់ទិន្នន័យបានទេ។

ការបរាជ័យគឺកម្រត្រូវបានសាកល្បងនៅក្រោមបន្ទុក ប៉ុន្តែការធ្វើតេស្តបែបនេះគឺចាំបាច់។ ការក្លែងធ្វើការបរាជ័យនៃការផ្ទុកនឹងបង្ហាញពីការចំណាយសរុបដែលកើតឡើងបន្ទាប់ពីការបរាជ័យ។

ភាពជាប់លាប់

ពិន្ទុនៃភាពជាប់លាប់នៃ 100% ត្រូវបានគេហៅផងដែរថា ភាពស្ថិតស្ថេរដ៏តឹងរឹង ភាពជាប់លាប់គឺជាធាតុផ្សំសំខាន់នៃប្រព័ន្ធផ្ទុកណាមួយ ប៉ុន្តែភាពជាប់លាប់ខ្លាំងគឺកម្រណាស់។ ឧទាហរណ៍ Amazon S3 ListObject មិនមានភាពស៊ីសង្វាក់គ្នានោះទេ វាគ្រាន់តែស្របគ្នានៅចុងបញ្ចប់ប៉ុណ្ណោះ។

តើភាពស៊ីសង្វាក់គ្នាតឹងរ៉ឹងមានន័យដូចម្តេច? សម្រាប់ប្រតិបត្តិការទាំងអស់បន្ទាប់ពីប្រតិបត្តិការ PUT ដែលបានបញ្ជាក់ ខាងក្រោមត្រូវតែកើតឡើង៖

តម្លៃដែលបានធ្វើបច្ចុប្បន្នភាពអាចមើលឃើញនៅពេលអានពីថ្នាំងណាមួយ។
ការអាប់ដេតត្រូវបានការពារប្រឆាំងនឹងភាពមិនដំណើរការឡើងវិញនៃថ្នាំង។

នេះមានន័យថាប្រសិនបើអ្នកទាញឌុយនៅកណ្តាលនៃការថតនោះ គ្មានអ្វីនឹងបាត់បង់ឡើយ។ ប្រព័ន្ធមិនដែលត្រឡប់ទិន្នន័យដែលខូច ឬហួសសម័យឡើយ។ នេះគឺជារបារខ្ពស់ដែលមានសារៈសំខាន់នៅក្នុងសេណារីយ៉ូជាច្រើន ចាប់ពីកម្មវិធីប្រតិបត្តិការ រហូតដល់ការបម្រុងទុក និងការស្តារឡើងវិញ។

សេចក្តីសន្និដ្ឋាន

ទាំងនេះគឺជារង្វាស់ទំហំផ្ទុកវត្ថុថ្មីដែលឆ្លុះបញ្ចាំងពីគំរូនៃការប្រើប្រាស់នៅក្នុងអង្គការនាពេលបច្ចុប្បន្ននេះ ដែលការអនុវត្ត ភាពស៊ីសង្វាក់គ្នា លទ្ធភាពធ្វើមាត្រដ្ឋាន ដែនកំហុស និងភាពឆបគ្នារបស់ S3 គឺជាប្លុកអគារសម្រាប់កម្មវិធីពពក និងការវិភាគទិន្នន័យធំ។ ខ្ញុំសូមណែនាំឱ្យប្រើបញ្ជីនេះបន្ថែមពីលើតម្លៃនៅពេលសាងសង់បណ្តុំទិន្នន័យទំនើប។

អំពីការផ្ទុកវត្ថុ Mail.ru Cloud Solutions៖ ស្ថាបត្យកម្ម S3 ។ 3 ឆ្នាំនៃការវិវត្តន៍នៃ Mail.ru Cloud Storage.

តើមានអ្វីទៀតដែលត្រូវអាន៖

ប្រភព: www.habr.com

រង្វាស់ផ្ទុកវត្ថុថ្មី។