[సూపర్ కంప్యూటింగ్ 2019]. కొత్త కింగ్‌స్టన్ DC1000M డ్రైవ్‌ల కోసం అప్లికేషన్ యొక్క ప్రాంతంగా బహుళ-క్లౌడ్ నిల్వ

మీరు ఒక వినూత్న వైద్య వ్యాపారాన్ని ప్రారంభిస్తున్నారని ఊహించండి - మానవ జన్యువు యొక్క విశ్లేషణ ఆధారంగా ఔషధాల యొక్క వ్యక్తిగత ఎంపిక. ప్రతి రోగికి 3 బిలియన్ జన్యు జంటలు ఉంటాయి మరియు x86 ప్రాసెసర్‌లలోని సాధారణ సర్వర్ లెక్కించేందుకు చాలా రోజులు పడుతుంది. వేలకొద్దీ థ్రెడ్‌లలో లెక్కలను సమాంతరంగా చేసే FPGA ప్రాసెసర్‌తో మీరు సర్వర్‌లో ప్రక్రియను వేగవంతం చేయవచ్చని మీకు తెలుసు. ఇది సుమారు గంటలో జీనోమ్ లెక్కింపును పూర్తి చేస్తుంది. అలాంటి సర్వర్‌లను అమెజాన్ వెబ్ సర్వీసెస్ (AWS) నుండి అద్దెకు తీసుకోవచ్చు. కానీ ఇక్కడ విషయం ఏమిటంటే: కస్టమర్, ఆసుపత్రి, ప్రొవైడర్ క్లౌడ్‌లో జన్యు డేటాను ఉంచడానికి నిర్దిష్టంగా వ్యతిరేకం. నేనేం చేయాలి? సూపర్‌కంప్యూటింగ్-2019 ఎగ్జిబిషన్‌లో కింగ్‌స్టన్ మరియు క్లౌడ్ స్టార్టప్ ఆర్కిటెక్చర్‌ను ప్రదర్శించాయి ప్రైవేట్ మల్టీక్లౌడ్ స్టోరేజ్ (PMCS), ఇది ఈ సమస్యను పరిష్కరిస్తుంది.

అధిక పనితీరు కంప్యూటింగ్ కోసం మూడు షరతులు

అధిక-పనితీరు గల కంప్యూటింగ్ (HPC, హై పెర్ఫార్మెన్స్ కంప్యూటింగ్) రంగంలో మానవ జన్యువును లెక్కించడం ఒక్కటే పని కాదు. శాస్త్రవేత్తలు భౌతిక క్షేత్రాలను గణిస్తారు, ఇంజనీర్లు విమాన భాగాలను లెక్కిస్తారు, ఫైనాన్షియర్‌లు ఆర్థిక నమూనాలను గణిస్తారు మరియు వారు కలిసి పెద్ద డేటాను విశ్లేషిస్తారు, నాడీ నెట్‌వర్క్‌లను రూపొందించారు మరియు అనేక ఇతర సంక్లిష్ట గణనలను చేస్తారు.

HPC యొక్క మూడు షరతులు అపారమైన కంప్యూటింగ్ శక్తి, చాలా పెద్ద మరియు వేగవంతమైన నిల్వ మరియు అధిక నెట్‌వర్క్ నిర్గమాంశ. అందువల్ల, LPC గణనలను నిర్వహించడానికి ప్రామాణిక అభ్యాసం కంపెనీ స్వంత డేటా సెంటర్‌లో (ఆన్-ప్రాంగణంలో) లేదా క్లౌడ్‌లోని ప్రొవైడర్ వద్ద ఉంటుంది.

కానీ అన్ని కంపెనీలు తమ స్వంత డేటా సెంటర్‌లను కలిగి ఉండవు మరియు తరచుగా చేసేవి వనరుల సామర్థ్యం పరంగా వాణిజ్య డేటా సెంటర్‌ల కంటే తక్కువగా ఉంటాయి (హార్డ్‌వేర్ మరియు సాఫ్ట్‌వేర్‌లను కొనుగోలు చేయడానికి మరియు నవీకరించడానికి మూలధన ఖర్చులు అవసరం, అధిక అర్హత కలిగిన సిబ్బందికి చెల్లించడం మొదలైనవి.) . క్లౌడ్ ప్రొవైడర్లు, దీనికి విరుద్ధంగా, "పే-యాజ్-యు-గో" ఆపరేటింగ్ కాస్ట్ మోడల్ ప్రకారం IT వనరులను అందిస్తారు, అనగా. వినియోగ వ్యవధికి మాత్రమే అద్దె వసూలు చేయబడుతుంది. లెక్కలు పూర్తయినప్పుడు, ఖాతా నుండి సర్వర్‌లను తీసివేయవచ్చు, తద్వారా IT బడ్జెట్‌లను ఆదా చేయవచ్చు. కానీ ప్రొవైడర్‌కు డేటా బదిలీపై శాసనపరమైన లేదా కార్పొరేట్ నిషేధం ఉన్నట్లయితే, క్లౌడ్‌లో HPC కంప్యూటింగ్ అందుబాటులో ఉండదు.

ప్రైవేట్ మల్టీక్లౌడ్ నిల్వ

ప్రైవేట్ మల్టీక్లౌడ్ స్టోరేజ్ ఆర్కిటెక్చర్ అనేది ఎంటర్‌ప్రైజ్ సైట్‌లో లేదా డేటా సెంటర్‌లోని ప్రత్యేక సురక్షిత కంపార్ట్‌మెంట్‌లో కొలొకేషన్ సేవను ఉపయోగించి డేటాను భౌతికంగా వదిలివేసేటప్పుడు క్లౌడ్ సేవలకు యాక్సెస్‌ను అందించడానికి రూపొందించబడింది. ముఖ్యంగా, ఇది డేటా-సెంట్రిక్ డిస్ట్రిబ్యూటెడ్ కంప్యూటింగ్ మోడల్, ఇక్కడ క్లౌడ్ సర్వర్లు ప్రైవేట్ క్లౌడ్ నుండి రిమోట్ స్టోరేజ్ సిస్టమ్‌లతో పని చేస్తాయి. దీని ప్రకారం, అదే స్థానిక డేటా నిల్వను ఉపయోగించి, మీరు అతిపెద్ద ప్రొవైడర్ల నుండి క్లౌడ్ సేవలతో పని చేయవచ్చు: AWS, MS Azure, Google Cloud Platform, మొదలైనవి.

సూపర్‌కంప్యూటింగ్-2019 ఎగ్జిబిషన్‌లో PMCS అమలుకు ఉదాహరణను చూపుతూ, కింగ్‌స్టన్ DC1000M SSD డ్రైవ్‌ల ఆధారంగా అధిక-పనితీరు గల డేటా స్టోరేజ్ సిస్టమ్ (SSD) నమూనాను అందించింది మరియు క్లౌడ్ స్టార్టప్‌లలో ఒకటి సాఫ్ట్‌వేర్ కోసం StorOne S1 మేనేజ్‌మెంట్ సాఫ్ట్‌వేర్‌ను అందించింది. ప్రధాన క్లౌడ్ ప్రొవైడర్‌లతో నిర్వచించిన నిల్వ మరియు అంకితమైన కమ్యూనికేషన్ ఛానెల్‌లు.

PMCS, ప్రైవేట్ స్టోరేజ్‌తో క్లౌడ్ కంప్యూటింగ్ యొక్క వర్కింగ్ మోడల్‌గా, AT&T మరియు Equinix ఇన్‌ఫ్రాస్ట్రక్చర్‌లో సపోర్ట్ చేసే డేటా సెంటర్‌ల మధ్య అభివృద్ధి చెందిన నెట్‌వర్క్ కనెక్టివిటీతో ఉత్తర అమెరికా మార్కెట్ కోసం రూపొందించబడిందని గమనించాలి. ఈ విధంగా, ఏదైనా ఈక్వినిక్స్ క్లౌడ్ ఎక్స్ఛేంజ్ నోడ్ మరియు AWS క్లౌడ్‌లోని కొలొకేషన్ స్టోరేజ్ సిస్టమ్ మధ్య పింగ్ 1 మిల్లీసెకన్ల కంటే తక్కువగా ఉంటుంది (మూలం: ITPproToday).

ఎగ్జిబిషన్‌లో చూపబడిన PMCS ఆర్కిటెక్చర్ యొక్క ప్రదర్శనలో, DC1000M NVMe డిస్క్‌లలోని స్టోరేజ్ సిస్టమ్ కలలోకేషన్‌లో ఉంది మరియు AWS, MS Azure మరియు Google క్లౌడ్ ప్లాట్‌ఫారమ్ క్లౌడ్‌లలో వర్చువల్ మిషన్లు ఇన్‌స్టాల్ చేయబడ్డాయి, ఇవి ఒకదానికొకటి పింగ్ చేయబడ్డాయి. క్లయింట్-సర్వర్ అప్లికేషన్ డేటా సెంటర్‌లోని కింగ్‌స్టన్ స్టోరేజ్ సిస్టమ్ మరియు HP DL380 సర్వర్‌లతో రిమోట్‌గా పనిచేసింది మరియు ఈక్వినిక్స్ కమ్యూనికేషన్ ఛానెల్ ఇన్‌ఫ్రాస్ట్రక్చర్ ద్వారా, పైన పేర్కొన్న ప్రధాన ప్రొవైడర్‌ల క్లౌడ్ ప్లాట్‌ఫారమ్‌లను యాక్సెస్ చేసింది.

సూపర్‌కంప్యూటింగ్-2019 ఎగ్జిబిషన్‌లో ప్రైవేట్ మల్టీక్లౌడ్ స్టోరేజ్ ప్రదర్శన నుండి స్లయిడ్. మూలం: కింగ్స్టన్

ప్రైవేట్ మల్టీక్లౌడ్ స్టోరేజ్ ఆర్కిటెక్చర్‌ని నిర్వహించడానికి సారూప్య కార్యాచరణ యొక్క సాఫ్ట్‌వేర్ వివిధ కంపెనీల ద్వారా అందించబడుతుంది. ఈ ఆర్కిటెక్చర్‌కి సంబంధించిన నిబంధనలు కూడా విభిన్నంగా వినిపించవచ్చు - ప్రైవేట్ మల్టీక్లౌడ్ స్టోరేజ్ లేదా క్లౌడ్ కోసం ప్రైవేట్ స్టోరేజ్.

"నేటి సూపర్ కంప్యూటర్లు చమురు మరియు గ్యాస్ అన్వేషణ నుండి వాతావరణ అంచనా, ఆర్థిక మార్కెట్లు మరియు కొత్త సాంకేతికత అభివృద్ధి వరకు పురోగతిలో ముందంజలో ఉన్న వివిధ రకాల HPC అప్లికేషన్‌లను అమలు చేస్తున్నాయి" అని కింగ్‌స్టన్‌లోని ఎంటర్‌ప్రైజ్ SSD మేనేజ్‌మెంట్ మేనేజర్ కీత్ షిమ్మెంటి అన్నారు. “ఈ HPC అప్లికేషన్‌లకు ప్రాసెసర్ పనితీరు మరియు I/O వేగం మధ్య చాలా ఎక్కువ సరిపోలిక అవసరం. కింగ్‌స్టన్ సొల్యూషన్‌లు కంప్యూటింగ్‌లో పురోగతిని సాధించడంలో ఎలా సహాయపడుతున్నాయో పంచుకోవడానికి మేము గర్విస్తున్నాము, ప్రపంచంలోని అత్యంత తీవ్రమైన కంప్యూటింగ్ పరిసరాలలో మరియు అప్లికేషన్‌లలో అవసరమైన పనితీరును అందించాము.

DC1000M డ్రైవ్ మరియు దాని ఆధారంగా నిల్వ వ్యవస్థ యొక్క ఉదాహరణ

DC1000M U.2 NVMe SSD డేటా సెంటర్ కోసం కింగ్‌స్టన్చే రూపొందించబడింది మరియు ప్రత్యేకంగా కృత్రిమ మేధస్సు (AI) మరియు మెషిన్ లెర్నింగ్ (ML) అప్లికేషన్‌ల వంటి డేటా-ఇంటెన్సివ్ మరియు HPC అప్లికేషన్‌ల కోసం రూపొందించబడింది.

DC1000M U.2 NVMe 3.84TB డ్రైవ్. మూలం: కింగ్స్టన్

DC1000M U.2 డ్రైవ్‌లు సిలికాన్ మోషన్ SM96 కంట్రోలర్ (PCIe 3 మరియు NVMe 2270) ద్వారా నియంత్రించబడే 3.0-లేయర్ ఇంటెల్ 3.0D NAND మెమరీపై ఆధారపడి ఉంటాయి. సిలికాన్ మోషన్ SM2270 అనేది PCIe 16 x3.0 ఇంటర్‌ఫేస్, డ్యూయల్ 8-బిట్ DRAM డేటా బస్ మరియు మూడు ARM కార్టెక్స్ R32 డ్యూయల్ ప్రాసెసర్‌లతో కూడిన 5-లేన్ ఎంటర్‌ప్రైజ్ NVMe కంట్రోలర్.

DC1000M విభిన్న సామర్థ్యాలు విడుదల కోసం అందించబడ్డాయి: 0.96 నుండి 7.68 TB వరకు (అత్యంత జనాదరణ పొందిన సామర్థ్యాలు 3.84 మరియు 7.68 TB అని నమ్ముతారు). డ్రైవ్ యొక్క పనితీరు 800 వేల IOPSగా అంచనా వేయబడింది.

10x DC1000M U.2 NVMe 7.68 TBతో నిల్వ వ్యవస్థ. మూలం: కింగ్స్టన్

HPC అప్లికేషన్‌ల కోసం స్టోరేజ్ సిస్టమ్‌కి ఉదాహరణగా, కింగ్‌స్టన్ సూపర్‌కంప్యూటింగ్ 2019లో 10 DC1000M U.2 NVMe డ్రైవ్‌లతో కూడిన ర్యాక్ సొల్యూషన్‌ను అందించింది, ఒక్కోటి 7.68 TB సామర్థ్యంతో ఉంటుంది. నిల్వ వ్యవస్థ SB122A-PH, AIC నుండి 1U ఫారమ్ ఫ్యాక్టర్ ప్లాట్‌ఫారమ్‌పై ఆధారపడి ఉంటుంది. ప్రాసెసర్‌లు: 2x ఇంటెల్ జియాన్ CPU E5-2660, కింగ్‌స్టన్ DRAM 128 GB (8x16 GB) DDR4-2400 (పార్ట్ నంబర్: KSM24RS4/16HAI). ఇన్‌స్టాల్ చేయబడిన OS ఉబుంటు 18.04.3 LTS, Linux కెర్నల్ ver 5.0.0-31. gfio v3.13 పరీక్ష (ఫ్లెక్సిబుల్ I/O టెస్టర్) 5.8 Gbps నిర్గమాంశతో 23.8 మిలియన్ IOPS రీడ్ పనితీరును చూపింది.

సమర్పించబడిన నిల్వ వ్యవస్థ 5,8 మిలియన్ IOPS (సెకనుకు ఇన్‌పుట్-అవుట్‌పుట్ ఆపరేషన్‌లు) యొక్క స్థిరమైన రీడింగ్ పరంగా ఆకట్టుకునే లక్షణాలను చూపించింది. ఇది మాస్ మార్కెట్ సిస్టమ్‌ల కోసం SSDల కంటే వేగవంతమైన రెండు ఆర్డర్‌లు. ప్రత్యేక ప్రాసెసర్‌లపై నడుస్తున్న HPC అప్లికేషన్‌లకు ఈ రీడ్ స్పీడ్ అవసరం.

రష్యాలో ప్రైవేట్ నిల్వతో క్లౌడ్ కంప్యూటింగ్ HPC

ప్రొవైడర్ వద్ద అధిక-పనితీరు గల కంప్యూటింగ్‌ను ప్రదర్శించే పని, కానీ భౌతికంగా ఆన్-ప్రాంగణ డేటాను నిల్వ చేయడం, రష్యన్ కంపెనీలకు కూడా సంబంధించినది. దేశీయ వ్యాపారంలో మరొక సాధారణ కేసు ఏమిటంటే, విదేశీ క్లౌడ్ సేవలను ఉపయోగిస్తున్నప్పుడు, డేటా తప్పనిసరిగా రష్యన్ ఫెడరేషన్ యొక్క భూభాగంలో ఉండాలి. మేము కింగ్‌స్టన్ యొక్క దీర్ఘకాల భాగస్వామిగా క్లౌడ్ ప్రొవైడర్ సెలెక్టెల్ తరపున ఈ పరిస్థితులపై వ్యాఖ్యానించమని అడిగాము.

"రష్యాలో, క్లయింట్ యొక్క అకౌంటింగ్ విభాగానికి రష్యన్ మరియు అన్ని రిపోర్టింగ్ డాక్యుమెంట్లతో సేవతో, ఇదే విధమైన నిర్మాణాన్ని నిర్మించడం సాధ్యమవుతుంది. ఒక కంపెనీ ఆన్-ప్రాంగణ నిల్వ వ్యవస్థలను ఉపయోగించి అధిక-పనితీరు గల కంప్యూటింగ్‌ను నిర్వహించవలసి వస్తే, మేము సెలెక్టెల్ వద్ద వివిధ రకాల ప్రాసెసర్‌లతో సహా సర్వర్‌లను అద్దెకు తీసుకుంటాము. FPGA, GPU లేదా బహుళ-కోర్ CPUలు. అదనంగా, భాగస్వాముల ద్వారా, మేము క్లయింట్ కార్యాలయం మరియు మా డేటా సెంటర్ మధ్య అంకితమైన ఆప్టికల్ ఛానెల్‌ను ఏర్పాటు చేస్తాము, ”అని సెలెక్టెల్‌లోని సేవల అభివృద్ధి డైరెక్టర్ అలెగ్జాండర్ తుగోవ్ వ్యాఖ్యానించారు. — క్లయింట్ తన స్టోరేజ్ సిస్టమ్‌ను కంప్యూటర్ రూమ్‌లో ప్రత్యేక యాక్సెస్ మోడ్‌తో కలలోకేషన్‌లో ఉంచవచ్చు మరియు మా సర్వర్‌లలో మరియు గ్లోబల్ ప్రొవైడర్లు AWS, MS Azure, Google క్లౌడ్‌ల క్లౌడ్‌లలో అప్లికేషన్‌లను రన్ చేయవచ్చు. అయితే, క్లయింట్ యొక్క స్టోరేజ్ సిస్టమ్ USAలో ఉన్నట్లయితే, రెండో సందర్భంలో సిగ్నల్ ఆలస్యం ఎక్కువగా ఉంటుంది, అయితే బ్రాడ్‌బ్యాండ్ మల్టీ-క్లౌడ్ కనెక్షన్ అందించబడుతుంది.

తదుపరి కథనంలో మేము మరొక కింగ్‌స్టన్ సొల్యూషన్ గురించి మాట్లాడుతాము, ఇది సూపర్‌కంప్యూటింగ్ 2019 ఎగ్జిబిషన్ (డెన్వర్, కొలరాడో, USA)లో ప్రదర్శించబడింది మరియు GPUలను ఉపయోగించి మెషిన్ లెర్నింగ్ అప్లికేషన్‌లు మరియు పెద్ద డేటా విశ్లేషణ కోసం ఉద్దేశించబడింది. ఇది GPUDirect స్టోరేజ్ టెక్నాలజీ, ఇది NVMe నిల్వ మరియు GPU ప్రాసెసర్ మెమరీ మధ్య ప్రత్యక్ష డేటా బదిలీని అందిస్తుంది. మరియు అదనంగా, మేము NVMe డిస్క్‌లలోని ర్యాక్ స్టోరేజ్ సిస్టమ్‌లో 5.8 మిలియన్ IOPS డేటా రీడ్ స్పీడ్‌ని ఎలా సాధించగలిగామో వివరిస్తాము.

కింగ్‌స్టన్ టెక్నాలజీ ఉత్పత్తుల గురించి మరింత సమాచారం కోసం, దయచేసి సందర్శించండి సంస్థ యొక్క సైట్.

మూలం: www.habr.com