និន្នាការឧស្សាហកម្មនៅក្នុងការផ្ទុកដ៏ធំ

ថ្ងៃនេះយើងនឹងនិយាយអំពីវិធីរក្សាទុកទិន្នន័យល្អបំផុតនៅក្នុងពិភពលោកដែលបណ្តាញជំនាន់ទីប្រាំ ម៉ាស៊ីនស្កេនហ្សែន និងរថយន្តបើកបរដោយខ្លួនឯងផលិតទិន្នន័យច្រើនជាងមនុស្សជាតិទាំងអស់ដែលបានបង្កើតមុនបដិវត្តន៍ឧស្សាហកម្ម។

ពិភពលោករបស់យើងកំពុងបង្កើតព័ត៌មានកាន់តែច្រើនឡើង។ ផ្នែកខ្លះរបស់វាត្រូវបានបាត់ភ្លាមៗ ហើយត្រូវបានបាត់បង់ភ្លាមៗនៅពេលដែលវាត្រូវបានប្រមូល។ មួយ​ទៀត​គួរ​តែ​ត្រូវ​បាន​រក្សា​ទុក​យូរ​ជាង​នេះ ហើយ​មួយ​ទៀត​ត្រូវ​បាន​រចនា​ឡើង "រាប់​សតវត្ស​មក​ហើយ" - យ៉ាង​ហោច​ណាស់​នោះ​ជា​អ្វី​ដែល​យើង​ឃើញ​ពី​ពេល​បច្ចុប្បន្ន។ ព័ត៌មានហូរចូលទៅក្នុងមជ្ឈមណ្ឌលទិន្នន័យក្នុងល្បឿនមួយដែលវិធីសាស្រ្តថ្មី បច្ចេកវិទ្យាណាមួយដែលត្រូវបានរចនាឡើងដើម្បីបំពេញតម្រូវការ "គ្មានទីបញ្ចប់នេះ" ក្លាយជាលែងប្រើយ៉ាងឆាប់រហ័ស។

40 ឆ្នាំនៃការអភិវឌ្ឍន៍ប្រព័ន្ធផ្ទុកចែកចាយ

ការផ្ទុកបណ្តាញដំបូងនៅក្នុងទម្រង់ដែលយើងស្គាល់បានបង្ហាញខ្លួននៅក្នុងទសវត្សរ៍ឆ្នាំ 1980 ។ អ្នកជាច្រើនបានឆ្លងកាត់ NFS (ប្រព័ន្ធឯកសារបណ្តាញ), AFS (ប្រព័ន្ធឯកសារ Andrew) ឬ Coda ។ មួយទសវត្សរ៍ក្រោយមក ម៉ូដ និងបច្ចេកវិទ្យាបានផ្លាស់ប្តូរ ហើយប្រព័ន្ធឯកសារដែលបានចែកចាយបានផ្តល់មធ្យោបាយដល់ប្រព័ន្ធផ្ទុកជាចង្កោមដោយផ្អែកលើ GPFS (ប្រព័ន្ធឯកសារស្របទូទៅ) CFS (ប្រព័ន្ធឯកសារជាចង្កោម) និង StorNext ។ ការផ្ទុកប្លុកនៃស្ថាបត្យកម្មបុរាណត្រូវបានប្រើជាមូលដ្ឋាន ដែលប្រព័ន្ធឯកសារតែមួយត្រូវបានបង្កើតដោយប្រើស្រទាប់កម្មវិធី។ ដំណោះស្រាយទាំងនេះ និងស្រដៀងគ្នានៅតែត្រូវបានប្រើប្រាស់ កាន់កាប់ទីផ្សារពិសេសរបស់ពួកគេ ហើយមានតម្រូវការខ្លាំង។

នៅវេននៃសហស្សវត្សរ៍ គំរូនៃការផ្ទុកចែកចាយបានផ្លាស់ប្តូរខ្លះ ហើយប្រព័ន្ធដែលមានស្ថាបត្យកម្ម SN (Shared-Nothing) បានកាន់កាប់តំណែងនាំមុខគេ។ មានការផ្លាស់ប្តូរពីការផ្ទុកចង្កោមទៅការផ្ទុកនៅលើថ្នាំងនីមួយៗ ដែលជាក្បួនគឺជាម៉ាស៊ីនមេបុរាណជាមួយនឹងកម្មវិធីដែលផ្តល់នូវការផ្ទុកដែលអាចទុកចិត្តបាន។ នៅលើគោលការណ៍បែបនេះ ចូរនិយាយថា HDFS (Hadoop Distributed File System) និង GFS (Global File System) ត្រូវបានបង្កើតឡើង។

កាន់តែខិតទៅជិតទសវត្សរ៍ឆ្នាំ 2010 គោលគំនិតនៃប្រព័ន្ធផ្ទុកចែកចាយដែលជាមូលដ្ឋានបានចាប់ផ្តើមត្រូវបានឆ្លុះបញ្ចាំងកាន់តែខ្លាំងឡើងនៅក្នុងផលិតផលពាណិជ្ជកម្មពេញលេញ ដូចជា VMware vSAN ក្រុមហ៊ុន Dell EMC Isilon និងរបស់យើង ក្រុមហ៊ុន Huawei OceanStor. នៅពីក្រោយវេទិកាដែលបានរៀបរាប់នោះ លែងមានសហគមន៍នៃអ្នកចូលចិត្តទៀតហើយ ប៉ុន្តែអ្នកលក់ជាក់លាក់ដែលទទួលខុសត្រូវចំពោះមុខងារ ការគាំទ្រ និងសេវាកម្មនៃផលិតផល និងធានាការអភិវឌ្ឍន៍បន្ថែមទៀតរបស់វា។ ដំណោះស្រាយបែបនេះគឺមានតម្រូវការច្រើនបំផុតនៅក្នុងតំបន់មួយចំនួន។

ប្រតិបត្តិករទូរគមនាគមន៍

ប្រហែលជាអ្នកប្រើប្រាស់ចាស់បំផុតនៃប្រព័ន្ធផ្ទុកចែកចាយគឺជាប្រតិបត្តិករទូរគមនាគមន៍។ ដ្យាក្រាមបង្ហាញពីក្រុមនៃកម្មវិធីណាដែលផលិតទិន្នន័យភាគច្រើន។ OSS (ប្រព័ន្ធគាំទ្រប្រតិបត្តិការ), MSS (សេវាគាំទ្រការគ្រប់គ្រង) និង BSS (ប្រព័ន្ធគាំទ្រអាជីវកម្ម) តំណាងឱ្យស្រទាប់កម្មវិធីបន្ថែមចំនួនបីដែលត្រូវការដើម្បីផ្តល់សេវាកម្មដល់អតិថិជន របាយការណ៍ហិរញ្ញវត្ថុដល់អ្នកផ្តល់សេវា និងការគាំទ្រផ្នែកប្រតិបត្តិការដល់វិស្វករប្រតិបត្តិករ។

ជាញឹកញាប់ ទិន្នន័យនៃស្រទាប់ទាំងនេះត្រូវបានលាយបញ្ចូលគ្នាយ៉ាងខ្លាំងជាមួយគ្នាទៅវិញទៅមក ហើយដើម្បីជៀសវាងការប្រមូលផ្តុំនៃច្បាប់ចម្លងដែលមិនចាំបាច់ ការផ្ទុកដែលបានចែកចាយត្រូវបានប្រើ ដែលប្រមូលផ្តុំព័ត៌មានទាំងមូលដែលមកពីបណ្តាញប្រតិបត្តិការ។ កន្លែងផ្ទុកត្រូវបានបញ្ចូលគ្នាទៅក្នុងអាងទូទៅ ដែលត្រូវបានចូលប្រើដោយសេវាកម្មទាំងអស់។

ការគណនារបស់យើងបង្ហាញថាការផ្លាស់ប្តូរពីប្រព័ន្ធផ្ទុកបុរាណទៅជាប្រព័ន្ធផ្ទុកទិន្នន័យអនុញ្ញាតឱ្យអ្នកសន្សំបានរហូតដល់ 70% នៃថវិកាតែប៉ុណ្ណោះដោយបោះបង់ចោលប្រព័ន្ធផ្ទុកទិន្នន័យកម្រិតខ្ពស់ និងប្រើប្រាស់ម៉ាស៊ីនមេស្ថាបត្យកម្មបុរាណធម្មតា (ជាធម្មតា x86) ធ្វើការរួមគ្នាជាមួយឯកទេស។ កម្មវិធី។ ប្រតិបត្តិករកោសិកាបានចាប់ផ្តើមទិញដំណោះស្រាយបែបនេះក្នុងបរិមាណដ៏ច្រើន។ ជាពិសេស ប្រតិបត្តិកររុស្ស៊ីបានប្រើប្រាស់ផលិតផលបែបនេះពីក្រុមហ៊ុន Huawei អស់រយៈពេលជាង XNUMX ឆ្នាំមកហើយ។

បាទ/ចាស កិច្ចការមួយចំនួនមិនអាចបញ្ចប់ដោយប្រើប្រព័ន្ធចែកចាយបានទេ។ ឧទាហរណ៍ ជាមួយនឹងតម្រូវការប្រតិបត្តិការកើនឡើង ឬភាពឆបគ្នាជាមួយពិធីការចាស់ៗ។ ប៉ុន្តែយ៉ាងហោចណាស់ 70% នៃទិន្នន័យដែលដំណើរការដោយប្រតិបត្តិករអាចមានទីតាំងនៅក្នុងអាងចែកចាយ។

វិស័យធនាគារ

នៅក្នុងធនាគារណាមួយមានប្រព័ន្ធ IT ផ្សេងៗគ្នាជាច្រើន ដោយចាប់ផ្តើមពីដំណើរការ និងបញ្ចប់ដោយប្រព័ន្ធធនាគារស្វ័យប្រវត្តិ។ ហេដ្ឋារចនាសម្ព័ន្ធនេះក៏ដំណើរការជាមួយនឹងចំនួនព័ត៌មានដ៏ច្រើនផងដែរ ខណៈដែលការងារភាគច្រើនមិនតម្រូវឱ្យមានការបង្កើនប្រសិទ្ធភាព និងភាពជឿជាក់នៃប្រព័ន្ធផ្ទុក ឧទាហរណ៍ ការអភិវឌ្ឍន៍ ការធ្វើតេស្ត ស្វ័យប្រវត្តិកម្មនៃដំណើរការការិយាល័យ។ល។ នៅទីនេះ ការប្រើប្រាស់ប្រព័ន្ធផ្ទុកទិន្នន័យបុរាណគឺអាចធ្វើទៅបាន។ ប៉ុន្តែ​ជា​រៀង​រាល់​ឆ្នាំ វា​ទទួល​បាន​ប្រាក់​ចំណេញ​តិច និង​តិច។ លើសពីនេះទៀតក្នុងករណីនេះមិនមានភាពបត់បែនក្នុងការប្រើប្រាស់ធនធានប្រព័ន្ធផ្ទុកទេការដំណើរការដែលត្រូវបានគណនាដោយផ្អែកលើបន្ទុកខ្ពស់បំផុត។

នៅពេលប្រើប្រព័ន្ធផ្ទុកចែកចាយ ថ្នាំងរបស់ពួកគេដែលតាមពិតម៉ាស៊ីនមេធម្មតា អាចបំប្លែងបានគ្រប់ពេល ជាឧទាហរណ៍ ចូលទៅក្នុងកសិដ្ឋានម៉ាស៊ីនមេ ហើយប្រើជាវេទិកាកុំព្យូទ័រ។

បឹងទិន្នន័យ

ដ្យាក្រាមខាងលើបង្ហាញពីបញ្ជីអ្នកប្រើប្រាស់សេវាកម្មធម្មតា។ បឹងទិន្នន័យ. ទាំងនេះអាចជាសេវារដ្ឋាភិបាលអេឡិចត្រូនិក (ឧទាហរណ៍ "សេវារដ្ឋាភិបាល") សហគ្រាសឌីជីថល គ្រឹះស្ថានហិរញ្ញវត្ថុ។ល។ ពួកគេទាំងអស់ត្រូវធ្វើការជាមួយបរិមាណដ៏ធំនៃព័ត៌មានចម្រុះ។

ការប្រើប្រាស់ប្រព័ន្ធផ្ទុកទិន្នន័យបុរាណដើម្បីដោះស្រាយបញ្ហាបែបនេះគឺគ្មានប្រសិទ្ធភាពទេ ព្រោះវាទាមទារទាំងការចូលដំណើរការដែលមានប្រសិទ្ធភាពខ្ពស់ក្នុងការទប់ស្កាត់មូលដ្ឋានទិន្នន័យ និងការចូលប្រើជាប្រចាំទៅកាន់បណ្ណាល័យនៃឯកសារដែលបានស្កែនទុកជាវត្ថុ។ ឧទាហរណ៍ ប្រព័ន្ធបញ្ជាទិញតាមរយៈវិបផតថលក៏អាចភ្ជាប់នៅទីនេះផងដែរ។ ដើម្បីអនុវត្តអ្វីៗទាំងអស់នេះនៅលើវេទិកាផ្ទុកបុរាណ អ្នកនឹងត្រូវការឧបករណ៍ដ៏ធំមួយសម្រាប់កិច្ចការផ្សេងៗ។ ប្រព័ន្ធផ្ទុកសកលផ្តេកមួយអាចគ្របដណ្តប់បានយ៉ាងល្អនូវរាល់កិច្ចការដែលបានរាយបញ្ជីពីមុន៖ អ្នកគ្រាន់តែត្រូវការបង្កើតបណ្តុំជាច្រើនដែលមានលក្ខណៈផ្ទុកផ្សេងៗគ្នានៅក្នុងវា។

អ្នកបង្កើតព័ត៌មានថ្មី។

បរិមាណព័ត៌មានដែលរក្សាទុកក្នុងពិភពលោកកំពុងកើនឡើងប្រហែល 30% ក្នុងមួយឆ្នាំ។ នេះគឺជាដំណឹងល្អសម្រាប់អ្នកលក់ឧបករណ៍ផ្ទុក ប៉ុន្តែតើអ្វីទៅជាប្រភពសំខាន់នៃទិន្នន័យនេះ?

កាលពី 70 ឆ្នាំមុន បណ្តាញសង្គមបានក្លាយជាម៉ាស៊ីនភ្លើងបែបនេះ វាទាមទារឱ្យមានការបង្កើតនូវចំនួនដ៏ច្រើននៃក្បួនដោះស្រាយថ្មី ដំណោះស្រាយផ្នែករឹង។ ទីមួយគឺ cloud computing។ បច្ចុប្បន្ននេះ ក្រុមហ៊ុនប្រមាណ XNUMX% ប្រើប្រាស់សេវាកម្ម Cloud តាមមធ្យោបាយមួយ ឬមធ្យោបាយផ្សេងទៀត។ ទាំងនេះអាចជាប្រព័ន្ធអ៊ីមែល ច្បាប់ចម្លងបម្រុងទុក និងអង្គភាពនិម្មិតផ្សេងទៀត។
កម្មវិធីបញ្ជាទីពីរគឺជាបណ្តាញជំនាន់ទីប្រាំ។ ទាំងនេះគឺជាល្បឿនថ្មី និងបរិមាណផ្ទេរទិន្នន័យថ្មី។ យោងតាមការព្យាករណ៍របស់យើង ការអនុម័តយ៉ាងទូលំទូលាយនៃ 5G នឹងនាំឱ្យមានការធ្លាក់ចុះនៃតម្រូវការសម្រាប់កាតអង្គចងចាំពន្លឺ។ មិនថាមានអង្គចងចាំប៉ុន្មាននៅក្នុងទូរស័ព្ទនោះទេ វានៅតែអស់ ហើយប្រសិនបើឧបករណ៍នេះមានឆានែល 100 មេហ្គាប៊ីត នោះមិនចាំបាច់រក្សាទុករូបថតក្នុងមូលដ្ឋានទេ។

ក្រុមទីបីនៃហេតុផលដែលតម្រូវការសម្រាប់ប្រព័ន្ធផ្ទុកទិន្នន័យកំពុងកើនឡើងរួមមានការអភិវឌ្ឍន៍យ៉ាងឆាប់រហ័សនៃបញ្ញាសិប្បនិម្មិត ការផ្លាស់ប្តូរទៅជាការវិភាគទិន្នន័យធំ និងនិន្នាការឆ្ពោះទៅរកស្វ័យប្រវត្តិកម្មសកលនៃអ្វីគ្រប់យ៉ាងដែលអាចធ្វើទៅបាន។

លក្ខណៈពិសេសមួយនៃ "ចរាចរណ៍ថ្មី" គឺជារបស់វា។ កង្វះរចនាសម្ព័ន្ធ. យើងត្រូវរក្សាទុកទិន្នន័យនេះដោយមិនកំណត់ទម្រង់របស់វាតាមមធ្យោបាយណាមួយឡើយ។ វាត្រូវបានទាមទារសម្រាប់តែការអានជាបន្តបន្ទាប់។ ជាឧទាហរណ៍ ដើម្បីកំណត់ចំនួនប្រាក់កម្ចីដែលមាន ប្រព័ន្ធដាក់ពិន្ទុធនាគារនឹងពិនិត្យមើលរូបថតដែលអ្នកបង្ហោះនៅលើបណ្តាញសង្គម កំណត់ថាតើអ្នកឧស្សាហ៍ទៅសមុទ្រ និងនៅក្នុងភោជនីយដ្ឋាន ហើយក្នុងពេលតែមួយសិក្សាពីឯកសារវេជ្ជសាស្ត្ររបស់អ្នកដែលមាន ទៅវា។ ម្យ៉ាងវិញទៀត ទិន្នន័យទាំងនេះមានលក្ខណៈទូលំទូលាយ ប៉ុន្តែម្យ៉ាងវិញទៀត ខ្វះភាពដូចគ្នា

មហាសមុទ្រនៃទិន្នន័យគ្មានរចនាសម្ព័ន្ធ

តើការលេចឡើងនៃ "ទិន្នន័យថ្មី" មានបញ្ហាអ្វីខ្លះ? ទីមួយក្នុងចំណោមពួកគេ ជាការពិតគឺបរិមាណព័ត៌មានដ៏ច្រើន និងរយៈពេលប៉ាន់ស្មាននៃការផ្ទុករបស់វា។ រថយន្តទំនើបគ្មានអ្នកបើកបរតែម្នាក់ឯងបង្កើតទិន្នន័យរហូតដល់ 60 terabytes ជារៀងរាល់ថ្ងៃពីឧបករណ៍ចាប់សញ្ញា និងយន្តការទាំងអស់របស់វា។ ដើម្បីអភិវឌ្ឍក្បួនដោះស្រាយចលនាថ្មី ព័ត៌មាននេះត្រូវតែដំណើរការក្នុងថ្ងៃតែមួយ បើមិនដូច្នេះទេ វានឹងចាប់ផ្តើមកកកុញ។ ក្នុងពេលជាមួយគ្នានេះវាត្រូវតែត្រូវបានរក្សាទុកក្នុងរយៈពេលយូរ - ជាច្រើនទសវត្សរ៍។ មានតែពេលនោះទេ ដែលវាអាចទៅរួចនៅពេលអនាគត ដើម្បីធ្វើការសន្និដ្ឋានដោយផ្អែកលើគំរូវិភាគធំៗ។

ឧបករណ៍មួយសម្រាប់ឌិគ្រីបហ្សែនហ្សែនផលិតប្រហែល 6 TB ក្នុងមួយថ្ងៃ។ ហើយទិន្នន័យដែលប្រមូលបានដោយជំនួយរបស់វាមិនបញ្ជាក់ពីការលុបទាល់តែសោះ ពោលគឺសន្មតថា វាគួរតែត្រូវបានរក្សាទុកជារៀងរហូត។

ទីបំផុតបណ្តាញជំនាន់ទីប្រាំដូចគ្នា។ បន្ថែមពីលើព័ត៌មានដែលបានបញ្ជូនជាក់ស្តែង បណ្តាញបែបនេះគឺជាអ្នកបង្កើតទិន្នន័យដ៏ធំមួយ៖ កំណត់ហេតុសកម្មភាព កំណត់ត្រាការហៅទូរសព្ទ លទ្ធផលកម្រិតមធ្យមនៃអន្តរកម្មរវាងម៉ាស៊ីនទៅម៉ាស៊ីន។ល។

ទាំងអស់នេះទាមទារឱ្យមានការអភិវឌ្ឍន៍វិធីសាស្រ្ត និងក្បួនដោះស្រាយថ្មីសម្រាប់ការរក្សាទុក និងដំណើរការព័ត៌មាន។ ហើយវិធីសាស្រ្តបែបនេះកំពុងលេចឡើង។

បច្ចេកវិទ្យាសម័យថ្មី។

មានដំណោះស្រាយបីក្រុមដែលត្រូវបានរចនាឡើងដើម្បីទប់ទល់នឹងតម្រូវការថ្មីសម្រាប់ប្រព័ន្ធផ្ទុកព័ត៌មាន៖ ការណែនាំអំពីបញ្ញាសិប្បនិមិត្ត ការវិវត្តបច្ចេកទេសនៃប្រព័ន្ធផ្ទុកទិន្នន័យ និងការច្នៃប្រឌិតក្នុងវិស័យស្ថាបត្យកម្មប្រព័ន្ធ។ តោះចាប់ផ្តើមជាមួយ AI ។

នៅក្នុងដំណោះស្រាយថ្មីរបស់ Huawei បញ្ញាសិប្បនិមិត្តត្រូវបានប្រើប្រាស់ក្នុងកម្រិតនៃការផ្ទុកដោយខ្លួនវាផ្ទាល់ ដែលត្រូវបានបំពាក់ដោយប្រព័ន្ធដំណើរការ AI ដែលអនុញ្ញាតឱ្យប្រព័ន្ធវិភាគស្ថានភាពរបស់វាដោយឯករាជ្យ និងព្យាករណ៍ពីការបរាជ័យ។ ប្រសិនបើប្រព័ន្ធផ្ទុកត្រូវបានភ្ជាប់ទៅពពកសេវាកម្មដែលមានសមត្ថភាពគណនាយ៉ាងសំខាន់ បញ្ញាសិប្បនិម្មិតនឹងអាចដំណើរការព័ត៌មានបន្ថែម និងបង្កើនភាពត្រឹមត្រូវនៃសម្មតិកម្មរបស់វា។

បន្ថែមពីលើការបរាជ័យ AI បែបនេះអាចទស្សន៍ទាយការផ្ទុកខ្ពស់បំផុតនាពេលអនាគត និងពេលវេលាដែលនៅសល់រហូតដល់សមត្ថភាពអស់។ វាអនុញ្ញាតឱ្យអ្នកបង្កើនប្រសិទ្ធភាពប្រតិបត្តិការ និងធ្វើមាត្រដ្ឋានប្រព័ន្ធ មុនពេលព្រឹត្តិការណ៍ដែលមិនចង់បានកើតឡើង។

ឥឡូវនេះអំពីការវិវត្តនៃប្រព័ន្ធផ្ទុកទិន្នន័យ។ ដ្រាយវ៍ពន្លឺដំបូងត្រូវបានផលិតដោយប្រើបច្ចេកវិទ្យា SLC (Single-Level Cell) ។ ឧបករណ៍ដែលមានមូលដ្ឋានលើវាមានល្បឿនលឿន អាចទុកចិត្តបាន មានស្ថេរភាព ប៉ុន្តែមានសមត្ថភាពតូច និងមានតម្លៃថ្លៃណាស់។ កំណើនបរិមាណ និងការកាត់បន្ថយតម្លៃត្រូវបានសម្រេចតាមរយៈសម្បទានបច្ចេកទេសមួយចំនួន ដោយសារតែល្បឿន ភាពជឿជាក់ និងអាយុសេវាកម្មរបស់ដ្រាយត្រូវបានកាត់បន្ថយ។ ទោះជាយ៉ាងណាក៏ដោយ និន្នាការនេះមិនប៉ះពាល់ដល់ប្រព័ន្ធផ្ទុកទិន្នន័យខ្លួនឯងទេ ដែលជាទូទៅដោយសារតែល្បិចស្ថាបត្យកម្មផ្សេងៗ កាន់តែមានផលិតភាព និងអាចទុកចិត្តបានកាន់តែច្រើន។

ប៉ុន្តែហេតុអ្វីបានជាអ្នកត្រូវការប្រព័ន្ធផ្ទុកទិន្នន័យ All-Flash? តើវាមិនគ្រប់គ្រាន់ទេក្នុងការជំនួស HDD ចាស់នៅក្នុងប្រព័ន្ធប្រតិបត្តិការរួចហើយជាមួយនឹង SSDs ថ្មីនៃកត្តាទម្រង់ដូចគ្នា? វាត្រូវបានទាមទារដើម្បីប្រើប្រាស់ធនធានទាំងអស់នៃដ្រាយរដ្ឋរឹងថ្មីប្រកបដោយប្រសិទ្ធភាព ដែលវាមិនអាចទៅរួចក្នុងប្រព័ន្ធចាស់។

ជាឧទាហរណ៍ ក្រុមហ៊ុន Huawei បានបង្កើតបច្ចេកវិទ្យាជាច្រើនដើម្បីដោះស្រាយបញ្ហានេះ ដែលមួយក្នុងចំណោមនោះគឺ FlashLinkដែលធ្វើឱ្យវាអាចធ្វើទៅបានដើម្បីបង្កើនប្រសិទ្ធភាពអន្តរកម្ម "ឧបករណ៍បញ្ជាថាស" តាមដែលអាចធ្វើទៅបាន។

ការកំណត់អត្តសញ្ញាណឆ្លាតវៃបានធ្វើឱ្យវាអាចបំបែកទិន្នន័យចូលទៅក្នុងចរន្តជាច្រើន និងទប់ទល់នឹងបាតុភូតដែលមិនចង់បានមួយចំនួនដូចជា WA (សរសេរការពង្រីក) ។ ក្នុងពេលជាមួយគ្នានេះ ក្បួនដោះស្រាយការងើបឡើងវិញថ្មី ជាពិសេស RAID 2.0+បង្កើនល្បឿននៃការកសាងឡើងវិញដោយកាត់បន្ថយពេលវេលារបស់វាទៅជាបរិមាណមិនសំខាន់ទាំងស្រុង។

ការបរាជ័យ ភាពចង្អៀតណែន ការប្រមូលសំរាម - កត្តាទាំងនេះក៏លែងប៉ះពាល់ដល់ដំណើរការនៃប្រព័ន្ធផ្ទុកផងដែរ ដោយសារការកែប្រែពិសេសចំពោះឧបករណ៍បញ្ជា។

ហើយការផ្ទុកទិន្នន័យប្លុកក៏កំពុងរៀបចំដើម្បីជួប NVMe. ចូរយើងចាំថាគ្រោងការណ៍បុរាណសម្រាប់ការរៀបចំការចូលប្រើទិន្នន័យដំណើរការដូចនេះ: ខួរក្បាលបានចូលប្រើឧបករណ៍បញ្ជា RAID តាមរយៈឡានក្រុង PCI Express ។ នោះ ធ្វើអន្តរកម្មជាមួយថាសមេកានិកតាមរយៈ SCSI ឬ SAS ។ ការប្រើប្រាស់ NVMe នៅលើ backend បង្កើនល្បឿនដំណើរការទាំងមូល ប៉ុន្តែវាមានគុណវិបត្តិមួយ៖ ដ្រាយត្រូវតែភ្ជាប់ដោយផ្ទាល់ទៅ processor ដើម្បីផ្តល់ឱ្យវានូវការចូលប្រើអង្គចងចាំដោយផ្ទាល់។

ដំណាក់កាលបន្ទាប់នៃការអភិវឌ្ឍន៍បច្ចេកវិទ្យាដែលយើងកំពុងឃើញនាពេលនេះគឺការប្រើប្រាស់ NVMe-oF (NVMe over Fabrics)។ សម្រាប់បច្ចេកវិទ្យាប្លុករបស់ក្រុមហ៊ុន Huawei ពួកគេគាំទ្រ FC-NVMe (NVMe លើ Fiber Channel) រួចហើយ ហើយ NVMe លើ RoCE (RDMA over Converged Ethernet) កំពុងដំណើរការហើយ។ ម៉ូដែលសាកល្បងមានមុខងារច្រើន នៅសល់ប៉ុន្មានខែទៀតមុនពេលការបង្ហាញជាផ្លូវការរបស់ពួកគេ។ ចំណាំថាអ្វីៗទាំងអស់នេះនឹងបង្ហាញនៅក្នុងប្រព័ន្ធចែកចាយ ដែល "អ៊ីសឺរណិតគ្មានការបាត់បង់" នឹងមានតម្រូវការខ្លាំង។

មធ្យោបាយបន្ថែមដើម្បីបង្កើនប្រសិទ្ធភាពប្រតិបត្តិការនៃការផ្ទុកដែលបានចែកចាយគឺការបោះបង់ចោលទាំងស្រុងនៃការឆ្លុះបញ្ចាំងទិន្នន័យ។ ដំណោះស្រាយរបស់ក្រុមហ៊ុន Huawei លែងប្រើ n ច្បាប់ចម្លងដូចនៅក្នុង RAID 1 ធម្មតាទៀតហើយ ហើយប្តូរទាំងស្រុងទៅ EC (លុបការសរសេរកូដ)។ កញ្ចប់គណិតវិទ្យាពិសេសគណនាប្លុកវត្ថុបញ្ជានៅកំឡុងពេលជាក់លាក់ណាមួយ ដែលអនុញ្ញាតឱ្យអ្នកស្ដារទិន្នន័យកម្រិតមធ្យមក្នុងករណីបាត់បង់។

យន្តការបង្ខូចទ្រង់ទ្រាយ និងការបង្ហាប់ក្លាយជាកាតព្វកិច្ច។ ប្រសិនបើនៅក្នុងប្រព័ន្ធផ្ទុកទិន្នន័យបុរាណ យើងត្រូវបានកំណត់ដោយចំនួន processors ដែលបានដំឡើងនៅក្នុងឧបករណ៍បញ្ជា បន្ទាប់មកនៅក្នុងប្រព័ន្ធផ្ទុកទិន្នន័យដែលអាចធ្វើមាត្រដ្ឋានបានចែកចាយដោយផ្ដេក ថ្នាំងនីមួយៗមានអ្វីគ្រប់យ៉ាងដែលចាំបាច់៖ ថាស អង្គចងចាំ ខួរក្បាល និងទំនាក់ទំនងគ្នាទៅវិញទៅមក។ ធនធានទាំងនេះគឺគ្រប់គ្រាន់ដើម្បីធានាថាការដកស្ទួន និងការបង្ហាប់មានឥទ្ធិពលតិចតួចបំផុតលើការអនុវត្ត។

និងអំពីវិធីសាស្រ្តបង្កើនប្រសិទ្ធភាពផ្នែករឹង។ នៅទីនេះវាអាចធ្វើទៅបានដើម្បីកាត់បន្ថយការផ្ទុកនៅលើប្រព័ន្ធដំណើរការកណ្តាលដោយមានជំនួយពីបន្ទះឈីបបន្ថែម (ឬប្លុកពិសេសនៅក្នុង processor ខ្លួនវា) ដែលដើរតួនាទីមួយ។ ថូ (TCP/IP Offload Engine) ឬទទួលយកភារកិច្ចគណិតវិទ្យារបស់ EC ការដកស្ទួន និងការបង្ហាប់។

វិធីសាស្រ្តថ្មីចំពោះការផ្ទុកទិន្នន័យត្រូវបានបញ្ចូលក្នុងស្ថាបត្យកម្មដែលបែងចែក (ចែកចាយ)។ ប្រព័ន្ធផ្ទុកទិន្នន័យកណ្តាលមានរោងចក្រម៉ាស៊ីនមេដែលតភ្ជាប់តាមរយៈ Fiber Channel ទៅ សាន ជាមួយនឹងអារេជាច្រើន។ គុណវិបត្តិនៃវិធីសាស្រ្តនេះគឺការពិបាកក្នុងការធ្វើមាត្រដ្ឋាន និងការធានានូវកម្រិតនៃការធានានៃសេវាកម្ម (ទាក់ទងនឹងការអនុវត្ត ឬភាពយឺតយ៉ាវ)។ ប្រព័ន្ធ Hyperconverged ប្រើម៉ាស៊ីនដូចគ្នាសម្រាប់ទាំងការរក្សាទុក និងដំណើរការព័ត៌មាន។ វាផ្តល់នូវវិសាលភាពស្ទើរតែគ្មានដែនកំណត់សម្រាប់ការធ្វើមាត្រដ្ឋាន ប៉ុន្តែរួមបញ្ចូលការចំណាយខ្ពស់សម្រាប់ការរក្សាភាពត្រឹមត្រូវនៃទិន្នន័យ។

មិនដូចទាំងពីរខាងលើទេ ស្ថាបត្យកម្មមិនរួមបញ្ចូលគ្នាមានន័យ បែងចែកប្រព័ន្ធទៅជាក្រណាត់កុំព្យូទ័រ និងប្រព័ន្ធផ្ទុកផ្តេក. នេះផ្តល់នូវអត្ថប្រយោជន៍នៃស្ថាបត្យកម្មទាំងពីរ និងអនុញ្ញាតឱ្យធ្វើមាត្រដ្ឋានស្ទើរតែគ្មានដែនកំណត់នៃតែធាតុដែលខ្វះការអនុវត្តប៉ុណ្ណោះ។

ពីសមាហរណកម្មទៅការបញ្ចូលគ្នា

កិច្ចការបុរាណ ភាពពាក់ព័ន្ធដែលទើបតែរីកចម្រើនក្នុងរយៈពេល 15 ឆ្នាំកន្លងមកនេះ គឺជាតម្រូវការក្នុងការផ្តល់នូវការផ្ទុកប្លុក ការចូលប្រើឯកសារ ការចូលទៅកាន់វត្ថុ ប្រតិបត្តិការកសិដ្ឋានទិន្នន័យធំ។ល។ ជាឧទាហរណ៍ ប្រព័ន្ធបម្រុងទុកនៅលើកាសែតម៉ាញ៉េទិច។

នៅដំណាក់កាលដំបូង មានតែការគ្រប់គ្រងសេវាកម្មទាំងនេះប៉ុណ្ណោះដែលអាចបង្រួបបង្រួមបាន។ ប្រព័ន្ធផ្ទុកទិន្នន័យខុសគ្នាត្រូវបានភ្ជាប់ទៅកម្មវិធីឯកទេសមួយចំនួន ដែលតាមរយៈនោះអ្នកគ្រប់គ្រងបានចែកចាយធនធានពីអាងដែលមាន។ ប៉ុន្តែដោយសារអាងទាំងនេះមានផ្នែករឹងផ្សេងគ្នា ការផ្ទេរបន្ទុករវាងពួកវាគឺមិនអាចទៅរួចទេ។ នៅកម្រិតខ្ពស់នៃការរួមបញ្ចូល ការប្រមូលផ្តុំបានកើតឡើងនៅកម្រិតច្រកផ្លូវ។ ប្រសិនបើការចែករំលែកឯកសារមាន វាអាចត្រូវបានបម្រើតាមរយៈពិធីការផ្សេងៗ។

វិធីសាស្ត្របំប្លែងកម្រិតខ្ពស់បំផុតដែលមានសម្រាប់យើងនាពេលបច្ចុប្បន្ន ពាក់ព័ន្ធនឹងការបង្កើតប្រព័ន្ធកូនកាត់សកល។ អ្វីដែលយើងគួរក្លាយជា OceanStor 100D. ការចូលប្រើជាសកលប្រើធនធានផ្នែករឹងដូចគ្នា ដោយបែងចែកជាឡូជីខលទៅជាក្រុមផ្សេងៗគ្នា ប៉ុន្តែអនុញ្ញាតឱ្យមានការផ្ទេរបន្ទុក។ ទាំងអស់នេះអាចត្រូវបានធ្វើតាមរយៈកុងសូលគ្រប់គ្រងតែមួយ។ តាមវិធីនេះ យើងអាចអនុវត្តគោលគំនិតនៃ "មជ្ឈមណ្ឌលទិន្នន័យមួយ - ប្រព័ន្ធផ្ទុកទិន្នន័យមួយ" ។

តម្លៃនៃការរក្សាទុកព័ត៌មានឥឡូវនេះកំណត់ការសម្រេចចិត្តស្ថាបត្យកម្មជាច្រើន។ ហើយទោះបីជាវាអាចត្រូវបានដាក់នៅជួរមុខដោយសុវត្ថិភាពក៏ដោយ ថ្ងៃនេះយើងកំពុងពិភាក្សាអំពីការផ្ទុក "បន្តផ្ទាល់" ជាមួយនឹងការប្រើប្រាស់សកម្ម ដូច្នេះការអនុវត្តក៏ត្រូវតែយកមកពិចារណាផងដែរ។ ទ្រព្យសម្បត្តិសំខាន់មួយទៀតនៃប្រព័ន្ធចែកចាយជំនាន់ក្រោយគឺការបង្រួបបង្រួម។ យ៉ាងណាមិញ គ្មាននរណាម្នាក់ចង់មានប្រព័ន្ធខុសគ្នាជាច្រើនដែលគ្រប់គ្រងពីកុងសូលផ្សេងៗនោះទេ។ គុណភាពទាំងអស់នេះត្រូវបានបញ្ចូលក្នុងស៊េរីថ្មីនៃផលិតផល Huawei មហាសមុទ្រប៉ាស៊ីហ្វិក.

ប្រព័ន្ធផ្ទុកដ៏ធំនៃជំនាន់ថ្មី។

OceanStor Pacific បំពេញតាមតម្រូវការនៃភាពជឿជាក់ប្រាំមួយប្រាំបួន (99,9999%) និងអាចត្រូវបានប្រើដើម្បីបង្កើតមជ្ឈមណ្ឌលទិន្នន័យថ្នាក់ HyperMetro ។ ជាមួយនឹងចម្ងាយរវាងមជ្ឈមណ្ឌលទិន្នន័យពីររហូតដល់ 100 គីឡូម៉ែត្រ ប្រព័ន្ធបង្ហាញភាពយឺតយ៉ាវបន្ថែម 2 ms ដែលធ្វើឱ្យវាអាចបង្កើតបានដោយផ្អែកលើដំណោះស្រាយដែលធន់នឹងគ្រោះមហន្តរាយ រួមទាំងម៉ាស៊ីនមេកូរ៉ុមផងដែរ។

ផលិតផលស៊េរីថ្មីបង្ហាញពីភាពបត់បែននៃពិធីការ។ រួចហើយ OceanStor 100D គាំទ្រការចូលប្រើប្លុក ការចូលប្រើវត្ថុ និងការចូលប្រើ Hadoop ។ ការចូលប្រើឯកសារក៏នឹងត្រូវបានអនុវត្តក្នុងពេលដ៏ខ្លីខាងមុខនេះ។ មិនចាំបាច់រក្សាទុកច្បាប់ចម្លងទិន្នន័យច្រើនទេ ប្រសិនបើពួកគេអាចចេញតាមរយៈពិធីការផ្សេងៗ។

វាហាក់ដូចជាតើគំនិតនៃ "បណ្តាញគ្មានការបាត់បង់" ទាក់ទងនឹងប្រព័ន្ធផ្ទុកទិន្នន័យអ្វី? ការពិតគឺថាប្រព័ន្ធផ្ទុកទិន្នន័យដែលបានចែកចាយត្រូវបានបង្កើតឡើងនៅលើមូលដ្ឋាននៃបណ្តាញដែលមានល្បឿនលឿនដែលគាំទ្រក្បួនដោះស្រាយសមស្រប និងយន្តការ RoCE ។ ប្រព័ន្ធបញ្ញាសិប្បនិមិត្តដែលគាំទ្រដោយកុងតាក់របស់យើងជួយបង្កើនល្បឿនបណ្តាញបន្ថែមទៀត និងកាត់បន្ថយភាពយឺតយ៉ាវ។ ក្រណាត់ AI. ការកើនឡើងនៃដំណើរការផ្ទុកនៅពេលបើកដំណើរការ AI Fabric អាចឈានដល់ 20% ។

តើថ្នាំងស្តុកចែកចាយ OceanStor Pacific ថ្មីគឺជាអ្វី? ដំណោះស្រាយកត្តាទម្រង់ 5U រួមមាន 120 drives និងអាចជំនួសថ្នាំងបុរាណចំនួន 92 ដែលផ្តល់នូវការសន្សំច្រើនជាងពីរដងនៅក្នុងទំហំ rack ។ ដោយមិនរក្សាទុកច្បាប់ចម្លង ប្រសិទ្ធភាពនៃដ្រាយកើនឡើងយ៉ាងខ្លាំង (រហូតដល់ +XNUMX%) ។

យើងទម្លាប់នឹងការពិតដែលថាការផ្ទុកដែលកំណត់ដោយកម្មវិធីគឺជាកម្មវិធីពិសេសដែលបានដំឡើងនៅលើម៉ាស៊ីនមេបុរាណ។ ប៉ុន្តែឥឡូវនេះ ដើម្បីសម្រេចបាននូវប៉ារ៉ាម៉ែត្រដ៏ល្អប្រសើរ ដំណោះស្រាយស្ថាបត្យកម្មនេះក៏ត្រូវការថ្នាំងពិសេសផងដែរ។ វាមានម៉ាស៊ីនមេពីរដែលផ្អែកលើប្រព័ន្ធដំណើរការ ARM ដែលគ្រប់គ្រងអារេនៃដ្រាយបីអ៊ីញ។

ម៉ាស៊ីនមេទាំងនេះមិនស័ក្តិសមសម្រាប់ដំណោះស្រាយ hyperconverged ទេ។ ទីមួយ មានកម្មវិធីមួយចំនួនសម្រាប់ ARM ហើយទីពីរ វាពិបាកក្នុងការរក្សាតុល្យភាពបន្ទុក។ យើងស្នើឱ្យផ្លាស់ទីទៅកន្លែងផ្ទុកដាច់ដោយឡែក៖ ចង្កោមកុំព្យូទ័រដែលតំណាងដោយម៉ាស៊ីនមេបុរាណ ឬ rack ដំណើរការដោយឡែកពីគ្នា ប៉ុន្តែត្រូវបានភ្ជាប់ទៅឧបករណ៍ផ្ទុក OceanStor Pacific ដែលបំពេញភារកិច្ចផ្ទាល់របស់ពួកគេផងដែរ។ ហើយវាបង្ហាញអំពីភាពត្រឹមត្រូវដោយខ្លួនឯង។

ជាឧទាហរណ៍ ចូរយើងយកដំណោះស្រាយទំហំផ្ទុកទិន្នន័យធំបែបបុរាណជាមួយនឹងប្រព័ន្ធ hyperconverged ដែលកាន់កាប់ 15 server rack ។ ប្រសិនបើអ្នកចែកចាយបន្ទុករវាងម៉ាស៊ីនមេកុំព្យូទ័រដាច់ដោយឡែក និងឧបករណ៍ផ្ទុក OceanStor Pacific ដោយបំបែកពួកវាពីគ្នាទៅវិញទៅមក ចំនួននៃរ៉ាកែតដែលត្រូវការនឹងត្រូវបានកាត់បន្ថយពាក់កណ្តាល! នេះកាត់បន្ថយការចំណាយប្រតិបត្តិការមជ្ឈមណ្ឌលទិន្នន័យ និងកាត់បន្ថយការចំណាយសរុបនៃភាពជាម្ចាស់។ នៅក្នុងពិភពលោកដែលបរិមាណនៃព័ត៌មានដែលបានរក្សាទុកកំពុងកើនឡើង 30% ក្នុងមួយឆ្នាំ អត្ថប្រយោជន៍បែបនេះមិនត្រូវបានគេបោះចោលនោះទេ។

***

អ្នកអាចទទួលបានព័ត៌មានបន្ថែមអំពីដំណោះស្រាយ Huawei និងសេណារីយ៉ូកម្មវិធីរបស់ពួកគេនៅលើរបស់យើង។ តំបន់បណ្តាញ ឬទាក់ទងតំណាងក្រុមហ៊ុនដោយផ្ទាល់។

ប្រភព: www.habr.com