[सुपरकम्प्युटिंग २०१९]। नयाँ किङ्स्टन DC2019M ड्राइभहरूको लागि आवेदनको क्षेत्रको रूपमा बहु-क्लाउड भण्डारण

कल्पना गर्नुहोस् कि तपाइँ एक अभिनव चिकित्सा व्यवसाय सुरु गर्दै हुनुहुन्छ - मानव जीनोमको विश्लेषणमा आधारित औषधिहरूको व्यक्तिगत चयन। प्रत्येक बिरामीसँग 3 बिलियन जीन जोडीहरू छन्, र x86 प्रोसेसरहरूमा नियमित सर्भरले गणना गर्न धेरै दिन लाग्नेछ। तपाईंलाई थाहा छ कि तपाईंले FPGA प्रोसेसरको साथ सर्भरमा प्रक्रियालाई गति दिन सक्नुहुन्छ जसले हजारौं थ्रेडहरूमा गणनाहरू समानान्तर गर्दछ। यसले लगभग एक घण्टामा जीनोम गणना पूरा गर्नेछ। त्यस्ता सर्भरहरू Amazon Web Services (AWS) बाट भाडामा लिन सकिन्छ। तर यहाँ कुरा छ: ग्राहक, अस्पताल, प्रदायकको क्लाउडमा आनुवंशिक डेटा राख्ने विरुद्धमा स्पष्ट रूपमा छ। मैले के गर्नुपर्छ? किंग्स्टन र क्लाउड स्टार्टअपले सुपरकम्प्युटिङ-2019 प्रदर्शनीमा वास्तुकला देखाए निजी मल्टिक्लाउड भण्डारण (PMCS), जसले यो समस्या समाधान गर्छ।

उच्च प्रदर्शन कम्प्युटिङका ​​लागि तीन सर्तहरू

मानव जीनोम गणना उच्च प्रदर्शन कम्प्युटिङ (HPC, उच्च प्रदर्शन कम्प्युटिङ) को क्षेत्रमा मात्र काम होइन। वैज्ञानिकहरूले भौतिक क्षेत्रहरू गणना गर्छन्, इन्जिनियरहरूले हवाइजहाजका भागहरू गणना गर्छन्, फाइनान्सरहरूले आर्थिक मोडेलहरू गणना गर्छन्, र तिनीहरू सँगै ठूला डेटाको विश्लेषण गर्छन्, न्यूरल नेटवर्कहरू निर्माण गर्छन्, र अन्य धेरै जटिल गणनाहरू गर्छन्।

HPC को तीन सर्तहरू विशाल कम्प्युटिङ पावर, धेरै ठूलो र छिटो भण्डारण, र उच्च नेटवर्क थ्रुपुट हुन्। तसर्थ, LPC गणनाहरू सञ्चालन गर्ने मानक अभ्यास कम्पनीको आफ्नै डेटा केन्द्र (अन-प्रिमाइसेस) वा क्लाउडमा प्रदायकमा छ।

तर सबै कम्पनीहरूको आफ्नै डाटा सेन्टरहरू छैनन्, र ती प्राय: व्यापारिक डाटा केन्द्रहरू भन्दा कम छन् संसाधन दक्षताको सन्दर्भमा (हार्डवेयर र सफ्टवेयर खरिद गर्न र अद्यावधिक गर्न, उच्च योग्य कर्मचारीहरूको लागि भुक्तानी, इत्यादिको लागि पूँजीगत खर्च आवश्यक हुन्छ)। क्लाउड प्रदायकहरू, यसको विपरित, "भुक्तानी-जसरी-यू-गो" सञ्चालन लागत मोडेल अनुसार आईटी स्रोतहरू प्रस्ताव गर्छन्, अर्थात्। भाडा प्रयोगको अवधिको लागि मात्र चार्ज गरिएको छ। जब गणनाहरू पूरा हुन्छन्, सर्भरहरू खाताबाट हटाउन सकिन्छ, जसले गर्दा आईटी बजेटहरू बचत हुन्छ। तर यदि प्रदायकमा डेटा स्थानान्तरणमा विधायी वा कर्पोरेट प्रतिबन्ध छ भने, क्लाउडमा HPC कम्प्युटिङ उपलब्ध छैन।

निजी मल्टिक्लाउड भण्डारण

निजी मल्टिक्लाउड भण्डारण वास्तुकला क्लाउड सेवाहरूमा पहुँच प्रदान गर्न डिजाइन गरिएको छ जब भौतिक रूपमा डाटालाई उद्यम साइटमा वा डाटा सेन्टरको छुट्टै सुरक्षित डिब्बामा एक कोलोकेशन सेवा प्रयोग गरेर छोड्छ। अनिवार्य रूपमा, यो डाटा-केन्द्रित वितरित कम्प्युटिङ मोडेल हो जहाँ क्लाउड सर्भरहरूले निजी क्लाउडबाट टाढाको भण्डारण प्रणालीहरूसँग काम गर्दछ। तदनुसार, उही स्थानीय डेटा भण्डारण प्रयोग गरेर, तपाईंले क्लाउड सेवाहरूसँग सबैभन्दा ठूलो प्रदायकहरूबाट काम गर्न सक्नुहुन्छ: AWS, MS Azure, Google Cloud Platform‎, आदि।

Supercomputing-2019 प्रदर्शनीमा PMCS को कार्यान्वयनको उदाहरण देखाउँदै, Kingston ले DC1000M SSD ड्राइभहरूमा आधारित उच्च-कार्यक्षमता डाटा भण्डारण प्रणाली (SSD) को नमूना प्रस्तुत गर्‍यो, र क्लाउड स्टार्टअपहरू मध्ये एकले StorOne S1 व्यवस्थापन सफ्टवेयर प्रस्तुत गर्‍यो- परिभाषित भण्डारण र प्रमुख क्लाउड प्रदायकहरूसँग समर्पित संचार च्यानलहरू।

यो ध्यान दिनुपर्छ कि PMCS, निजी भण्डारणको साथ क्लाउड कम्प्युटिङको कार्य मोडेलको रूपमा, AT&T र Equinix पूर्वाधारमा समर्थित डाटा केन्द्रहरू बीच विकसित नेटवर्क जडानको साथ उत्तर अमेरिकी बजारको लागि डिजाइन गरिएको हो। यसरी, कुनै पनि इक्विनिक्स क्लाउड एक्सचेन्ज नोड र AWS क्लाउडमा कोलोकेशन भण्डारण प्रणाली बीचको पिंग १ मिलिसेकेन्ड भन्दा कम छ (स्रोत: ITProToday).

प्रदर्शनीमा देखाइएको PMCS आर्किटेक्चरको प्रदर्शनमा, DC1000M NVMe डिस्कहरूमा भण्डारण प्रणाली कोलोकेशनमा अवस्थित थियो, र भर्चुअल मेसिनहरू AWS, MS Azure, र Google क्लाउड प्लेटफर्म क्लाउडहरूमा स्थापना गरिएको थियो, जसले एकअर्कालाई पिंग गर्यो। क्लाइन्ट-सर्भर अनुप्रयोगले टाढैबाट डाटा सेन्टरमा किंग्स्टन भण्डारण प्रणाली र HP DL380 सर्भरहरूसँग काम गर्‍यो र, Equinix संचार च्यानल पूर्वाधार मार्फत, माथि उल्लेखित प्रमुख प्रदायकहरूको क्लाउड प्लेटफर्महरू पहुँच गर्‍यो।

Supercomputing-2019 प्रदर्शनीमा निजी मल्टिक्लाउड भण्डारणको प्रस्तुतिबाट स्लाइड गर्नुहोस्। स्रोत: किंग्स्टन

निजी मल्टिक्लाउड भण्डारणको वास्तुकला प्रबन्ध गर्नको लागि समान प्रकार्यको सफ्टवेयर विभिन्न कम्पनीहरू द्वारा प्रस्ताव गरिएको छ। यस वास्तुकलाका लागि सर्तहरू पनि फरक आवाज हुन सक्छ - निजी मल्टिक्लाउड भण्डारण वा क्लाउडको लागि निजी भण्डारण।

"आजका सुपर कम्प्युटरहरूले विभिन्न HPC अनुप्रयोगहरू चलाउँछन् जुन तेल र ग्यास अन्वेषणदेखि मौसम पूर्वानुमान, वित्तीय बजार र नयाँ प्रविधिको विकाससम्मको प्रगतिमा अग्रपङ्क्तिमा छन्," किंग्स्टनमा इन्टरप्राइज SSD व्यवस्थापनका प्रबन्धक किथ शिमेन्टीले भने। "यी HPC अनुप्रयोगहरूलाई प्रोसेसर प्रदर्शन र I/O गति बीच धेरै ठूलो मिलान चाहिन्छ। किंग्स्टन समाधानहरूले संसारको सबैभन्दा चरम कम्प्युटिङ वातावरण र अनुप्रयोगहरूमा आवश्यक कार्यसम्पादन प्रदान गर्दै कम्प्युटिङमा सफलता हासिल गर्न मद्दत गरिरहेको कुरा साझा गर्न पाउँदा हामी गर्व गर्छौं।

DC1000M ड्राइभ र यसमा आधारित भण्डारण प्रणालीको उदाहरण

DC1000M U.2 NVMe SSD डेटा केन्द्रको लागि Kingston द्वारा डिजाइन गरिएको हो र विशेष गरी डेटा-गहन र HPC अनुप्रयोगहरू जस्तै कृत्रिम बुद्धिमत्ता (AI) र मेसिन लर्निङ (ML) अनुप्रयोगहरूको लागि डिजाइन गरिएको हो।

DC1000M U.2 NVMe 3.84TB ड्राइभ। स्रोत: किंग्स्टन

DC1000M U.2 ड्राइभहरू सिलिकन मोशन SM96 नियन्त्रक (PCIe 3 र NVMe 2270) द्वारा नियन्त्रित 3.0-लेयर Intel 3.0D NAND मेमोरीमा आधारित छन्। सिलिकन मोशन SM2270 PCIe 16 x3.0 इन्टरफेस, डुअल 8-बिट DRAM डाटा बस र तीन ARM Cortex R32 डुअल प्रोसेसरको साथ 5-लेन इन्टरप्राइज NVMe नियन्त्रक हो।

विभिन्न क्षमताहरूको DC1000M रिलीजको लागि प्रस्ताव गरिएको छ: 0.96 देखि 7.68 TB सम्म (सबैभन्दा लोकप्रिय क्षमताहरू 3.84 र 7.68 TB मानिन्छ)। ड्राइभको प्रदर्शन 800 हजार IOPS मा अनुमानित छ।

10x DC1000M U.2 NVMe 7.68 TB सँग भण्डारण प्रणाली। स्रोत: किंग्स्टन

HPC अनुप्रयोगहरूको लागि भण्डारण प्रणालीको उदाहरणको रूपमा, Kingston ले Supercomputing 2019 मा 10 DC1000M U.2 NVMe ड्राइभहरू सहितको र्याक समाधान प्रस्तुत गर्‍यो, प्रत्येकको क्षमता 7.68 TB। भण्डारण प्रणाली SB122A-PH मा आधारित छ, AIC बाट 1U फारम कारक प्लेटफर्म। प्रोसेसरहरू: 2x Intel Xeon CPU E5-2660, Kingston DRAM 128 GB (8x16 GB) DDR4-2400 (भाग नम्बर: KSM24RS4/16HAI)। स्थापित OS Ubuntu 18.04.3 LTS, लिनक्स कर्नेल 5.0.0-31 हो। gfio v3.13 परीक्षण (फ्लेक्सिबल I/O परीक्षक) ले 5.8 Gbps को थ्रुपुटको साथ 23.8 मिलियन IOPS को रिड प्रदर्शन देखाएको छ।

प्रस्तुत भण्डारण प्रणालीले 5,8 मिलियन IOPS (प्रति सेकेन्ड इनपुट-आउटपुट अपरेशनहरू) को स्थिर पढाइको सन्दर्भमा प्रभावशाली विशेषताहरू देखायो। यो मास मार्केट प्रणालीहरूको लागि SSDs भन्दा छिटो परिमाणको दुई अर्डर हो। यो पढ्ने गति विशेष प्रोसेसरहरूमा चलिरहेको HPC अनुप्रयोगहरूको लागि आवश्यक छ।

रूस मा निजी भण्डारण संग क्लाउड कम्प्युटिङ HPC

प्रदायकमा उच्च-प्रदर्शन कम्प्युटिङ प्रदर्शन गर्ने कार्य, तर भौतिक रूपमा अन-प्रिमाइसेस डाटा भण्डारण गर्ने, रूसी कम्पनीहरूको लागि पनि सान्दर्भिक छ। घरेलु व्यवसायमा अर्को सामान्य मामला हो जब, विदेशी क्लाउड सेवाहरू प्रयोग गर्दा, डेटा रूसी संघको क्षेत्रमा अवस्थित हुनुपर्छ। हामीले किंग्स्टनको लामो-समयको साझेदारको रूपमा क्लाउड प्रदायक चयनेलको तर्फबाट यी अवस्थाहरूमा टिप्पणीको लागि सोध्यौं।

"रूसमा, रूसीमा सेवा र ग्राहकको लेखा विभागको लागि सबै रिपोर्टिङ कागजातहरू सहित, समान वास्तुकला निर्माण गर्न सम्भव छ। यदि कुनै कम्पनीले अन-प्रिमाइसेस भण्डारण प्रणालीहरू प्रयोग गरेर उच्च-सम्पादन कम्प्युटिङ गर्न आवश्यक छ भने, हामी विभिन्न प्रकारका प्रोसेसरहरू सहित चयनेल भाडा सर्भरहरूमा। FPGA, GPU वा बहु-कोर CPU हरू। थप रूपमा, साझेदारहरू मार्फत, हामी ग्राहकको कार्यालय र हाम्रो डाटा सेन्टर बीच समर्पित अप्टिकल च्यानल बिछ्याउने व्यवस्था गर्छौं, "सेलेक्जेन्डर टुगोभ, चयनेलका सेवा विकास निर्देशकले टिप्पणी गरे। — क्लाइन्टले आफ्नो भण्डारण प्रणालीलाई विशेष पहुँच मोडको साथ कम्प्युटर कोठामा colocation मा राख्न र हाम्रा सर्भरहरूमा र AWS, MS Azure, Google क्लाउडका विश्वव्यापी प्रदायकहरूको क्लाउडहरूमा अनुप्रयोगहरू चलाउन पनि सक्छ। निस्सन्देह, पछिल्लो अवस्थामा सिग्नल ढिलाइ ग्राहकको भण्डारण प्रणाली संयुक्त राज्य अमेरिका मा अवस्थित थियो भने भन्दा बढी हुनेछ, तर एक ब्रॉडब्यान्ड बहु-क्लाउड जडान प्रदान गरिनेछ।

अर्को लेखमा हामी अर्को किंग्स्टन समाधानको बारेमा कुरा गर्नेछौं, जुन सुपरकम्प्युटिङ 2019 प्रदर्शनी (डेनभर, कोलोराडो, संयुक्त राज्य अमेरिका) मा प्रस्तुत गरिएको थियो र GPUs प्रयोग गरेर मेसिन लर्निङ एप्लिकेसनहरू र ठूला डाटा विश्लेषणको लागि हो। यो GPUDirect भण्डारण प्रविधि हो, जसले NVMe भण्डारण र GPU प्रोसेसर मेमोरी बीच प्रत्यक्ष डेटा स्थानान्तरण प्रदान गर्दछ। र थप रूपमा, हामी कसरी NVMe डिस्कहरूमा र्याक भण्डारण प्रणालीमा 5.8 मिलियन IOPS को डाटा पढ्ने गति प्राप्त गर्न व्यवस्थित गर्यौं भनेर वर्णन गर्नेछौं।

किंग्स्टन टेक्नोलोजी उत्पादनहरूको बारेमा थप जानकारीको लागि, कृपया भ्रमण गर्नुहोस् कम्पनीको साइट.

स्रोत: www.habr.com