[Supercomputing 2019]. Stòradh ioma-sgòth mar raon tagraidh airson na draibhearan ùra Kingston DC1000M

Smaoinich gu bheil thu a’ cur air bhog gnìomhachas meidigeach ùr-ghnàthach - taghadh fa leth de dhrogaichean stèidhichte air mion-sgrùdadh air genoma an duine. Tha 3 billean paidhrichean gine aig gach euslainteach, agus bheir frithealaiche cunbhalach air pròiseasairean x86 grunn làithean airson obrachadh a-mach. Tha fios agad gun urrainn dhut am pròiseas a luathachadh air frithealaiche le pròiseasar FPGA a bhios co-shìnte ri àireamhachadh thairis air mìltean de snàithleanan. Cuiridh e crìoch air àireamhachadh genome ann an timcheall air uair a thìde. Faodar na frithealaichean sin a thoirt air màl bho Amazon Web Services (AWS). Ach seo an rud: tha an neach-ceannach, an ospadal, gu cinnteach an aghaidh a bhith a’ cur dàta ginteil ann an sgòth an t-solaraiche. Dè bu chòir dhomh a dhèanamh? Sheall Kingston agus tòiseachadh sgòthan ailtireachd aig taisbeanadh Supercomputing-2019 Stòradh prìobhaideach MultiCloud (PMCS), a tha a 'fuasgladh na duilgheadas seo.

Trì cumhaichean airson coimpiutaireachd àrd-choileanadh

Chan e obrachadh a-mach an genoma daonna an aon obair ann an raon coimpiutaireachd àrd-choileanaidh (HPC, Coimpiutaireachd Àrd-choileanadh). Bidh luchd-saidheans ag obrachadh a-mach raointean fiosaigeach, bidh innleadairean a’ tomhas pàirtean itealain, bidh luchd-ionmhais a’ tomhas mhodalan eaconamach, agus còmhla bidh iad a’ sgrùdadh dàta mòr, a’ togail lìonraidhean neural, agus a’ dèanamh mòran àireamhachadh iom-fhillte eile.

Is e na trì cumhaichean aig HPC cumhachd coimpiutaireachd fìor mhòr, stòradh gu math mòr agus luath, agus gluasad lìonra àrd. Mar sin, tha an cleachdadh àbhaisteach airson àireamhachadh LPC a dhèanamh ann an ionad dàta na companaidh fhèin (air an togalach) no aig solaraiche san sgòth.

Ach chan eil na h-ionadan dàta aca fhèin aig a h-uile companaidh, agus tha an fheadhainn a bhios gu tric nas ìsle na ionadan dàta malairteach a thaobh èifeachdas stòrais (feumar caiteachas calpa gus bathar-cruaidh is bathar-bog a cheannach agus ùrachadh, pàigheadh ​​​​airson luchd-obrach le teisteanas àrd, msaa). Air an làimh eile, bidh solaraichean sgòthan a’ tabhann goireasan IT a rèir modal cosgais obrachaidh “Pay-as-you-go”, i.e. chan eil màl air a phàigheadh ​​​​ach airson na h-ùine cleachdaidh. Nuair a bhios an àireamhachadh deiseil, faodar frithealaichean a thoirt air falbh bhon chunntas, agus mar sin a’ sàbhaladh buidseatan IT. Ach ma tha casg reachdail no corporra air gluasad dàta chun t-solaraiche, chan eil coimpiutaireachd HPC san sgòth ri fhaighinn.

Stòradh prìobhaideach MultiCloud

Tha an ailtireachd Prìobhaideach MultiCloud Storage air a dhealbhadh gus cothrom a thoirt do sheirbheisean sgòthan fhad ‘s a tha iad a’ fàgail an dàta fhèin gu corporra air làrach na h-iomairt no ann an roinn thèarainte fa leth den ionad dàta a’ cleachdadh seirbheis colocation. Gu bunaiteach, is e modal coimpiutaireachd sgaoilte dàta a th’ ann far am bi frithealaichean sgòthan ag obair le siostaman stòraidh iomallach bho sgòth prìobhaideach. A rèir sin, a’ cleachdadh an aon stòradh dàta ionadail, faodaidh tu obrachadh le seirbheisean sgòthan bho na solaraichean as motha: AWS, MS Azure, Google Cloud Platform, msaa.

A’ nochdadh eisimpleir de bhuileachadh PMCS aig an taisbeanadh Supercomputing-2019, thug Kingston seachad sampall de shiostam stòraidh dàta àrd-choileanadh (SSD) stèidhichte air draibhearan DC1000M SSD, agus thug aon de na sgòthan tòiseachaidh bathar-bog riaghlaidh StorOne S1 a-steach airson bathar-bog- stòraidh comharraichte agus seanalan conaltraidh sònraichte le prìomh sholaraichean sgòthan.

Bu chòir a thoirt fa-near gu bheil PMCS, mar mhodail obrach de choimpiutaireachd sgòthan le stòradh prìobhaideach, air a dhealbhadh airson margaidh Ameireagadh a-Tuath leis a’ cheangal lìonra leasaichte eadar ionadan dàta a tha a’ faighinn taic air bun-structar AT&T agus Equinix. Mar sin, tha am ping eadar siostam stòraidh colocation ann an nód Equinix Cloud Exchange agus an sgòth AWS nas lugha na 1 millisecond (stòr: ITPro An-diugh).

Ann a bhith a’ taisbeanadh ailtireachd PMCS a chaidh a shealltainn aig an taisbeanadh, bha an siostam stòraidh air diosc DC1000M NVMe suidhichte ann an colocation, agus chaidh innealan brìgheil a chuir a-steach anns na sgòthan AWS, MS Azure, agus Google Cloud Platform, a bha a’ ceangal a chèile. Dh’obraich an tagradh frithealaiche teachdaiche air astar le siostam stòraidh Kingston agus frithealaichean HP DL380 anns an ionad dàta agus, tro bhun-structar seanail conaltraidh Equinix, fhuair e cothrom air àrd-ùrlaran sgòthan nam prìomh sholaraichean gu h-àrd.

Sleamhnachadh bhon taisbeanadh de Private MultiCloud Storage aig an taisbeanadh Supercomputing-2019. Stòr: Kingston

Tha bathar-bog den aon seòrsa gnìomh airson a bhith a’ riaghladh ailtireachd stòradh prìobhaideach multicloud air a thabhann le diofar chompanaidhean. Faodaidh na teirmean airson an ailtireachd seo a bhith eadar-dhealaichte cuideachd - Prìobhaideach MultiCloud Storage or Private Storage for Cloud.

“Tha sàr-choimpiutairean an latha an-diugh a’ ruith grunn thagraidhean HPC a tha aig fìor thoiseach adhartasan, bho sgrùdadh ola is gas gu ro-aithris na h-aimsire, margaidhean ionmhais agus leasachadh teicneòlais ùr,” thuirt Keith Schimmenti, manaidsear stiùireadh SSD iomairt aig Kingston. “Feumaidh na tagraidhean HPC seo maids fada nas motha eadar coileanadh pròiseasar agus astar I / O. Tha sinn moiteil a bhith a’ roinn mar a tha fuasglaidhean Kingston a’ cuideachadh le bhith a’ stiùireadh adhartasan ann an coimpiutaireachd, a’ lìbhrigeadh a’ choileanaidh a tha a dhìth anns na h-àrainneachdan coimpiutaireachd agus na h-iarrtasan as iomallaiche san t-saoghal.”

Dràibhear DC1000M agus eisimpleir de shiostam stòraidh stèidhichte air

Tha an DC1000M U.2 NVMe SSD air a dhealbhadh le Kingston airson an ionad dàta agus tha e air a dhealbhadh gu sònraichte airson tagraidhean dàta-dian agus HPC leithid tagraidhean inntleachd fuadain (AI) agus ionnsachadh innealan (ML).

Dràibhear DC1000M U.2 NVMe 3.84TB. Stòr: Kingston

Tha draibhearan DC1000M U.2 stèidhichte air cuimhne 96-layer Intel 3D NAND, fo smachd rianadair Silicon Motion SM2270 (PCIe 3.0 agus NVMe 3.0). Tha an Silicon Motion SM2270 na rianadair NVMe iomairt 16-lane le eadar-aghaidh PCIe 3.0 x8, bus dàta dùbailte 32-bit DRAM agus trì pròiseasairean dùbailte ARM Cortex R5.

Thathas a’ tabhann DC1000M de dhiofar chomasan airson an leigeil ma sgaoil: bho 0.96 gu 7.68 TB (thathas a’ creidsinn gur e 3.84 agus 7.68 TB na comasan as mòr-chòrdte). Thathas a’ meas gu bheil coileanadh an draibhidh aig 800 mìle IOPS.

Siostam stòraidh le 10x DC1000M U.2 NVMe 7.68 TB. Stòr: Kingston

Mar eisimpleir de shiostam stòraidh airson tagraidhean HPC, thaisbean Kingston aig Supercomputing 2019 fuasgladh raca le draibhearan 10 DC1000M U.2 NVMe, gach fear le comas 7.68 TB. Tha an siostam stòraidh stèidhichte air an SB122A-PH, àrd-ùrlar factar foirm 1U bho AIC. Pròiseasaran: 2x Intel Xeon CPU E5-2660, Kingston DRAM 128 GB (8x16 GB) DDR4-2400 (Àireamh pàirt: KSM24RS4 / 16HAI). Is e an OS a chaidh a chuir a-steach Ubuntu 18.04.3 LTS, Linux kernel ver 5.0.0-31. Sheall an deuchainn gfio v3.13 (deuchainn sùbailte I / O) coileanadh leughaidh de 5.8 millean IOPS le toradh de 23.8 Gbps.

Sheall an siostam stòraidh a chaidh a thaisbeanadh feartan drùidhteach a thaobh leughadh seasmhach de 5,8 millean IOPS (obair cur-a-steach gach diog). Is e seo dà òrdugh meudachd nas luaithe na SSDs airson siostaman margaidh mòr. Tha feum air an astar leughaidh seo airson tagraidhean HPC a tha a’ ruith air pròiseasairean sònraichte.

Cloud coimpiutaireachd HPC le stòradh prìobhaideach san Ruis

Tha an obair a bhith a’ coileanadh coimpiutaireachd àrd-choileanaidh aig an t-solaraiche, ach a’ stòradh dàta san togalach gu corporra, cuideachd buntainneach do chompanaidhean Ruiseanach. Is e cùis cumanta eile ann an gnìomhachas dachaigheil nuair, nuair a bhios tu a ’cleachdadh seirbheisean sgòthan cèin, feumaidh dàta a bhith suidhichte air fearann ​​​​Caidreachas na Ruis. Dh’ iarr sinn beachd air na suidheachaidhean sin às leth an t-solaraiche sgòthan Selectel mar chom-pàirtiche fad-ùine aig Kingston.

“Anns an Ruis, tha e comasach ailtireachd coltach ris a thogail, le seirbheis ann an Ruisis agus a h-uile sgrìobhainn aithris airson roinn cunntasachd an neach-dèiligidh. Ma dh’ fheumas companaidh coimpiutaireachd àrd-choileanadh a dhèanamh a’ cleachdadh siostaman stòraidh san togalach, bidh sinne aig Selectel a’ màl frithealaichean le pròiseasairean de dhiofar seòrsa, a’ gabhail a-steach FPGA, GPU no CPUan ioma-cridhe. A bharrachd air an sin, tro chom-pàirtichean, bidh sinn a’ cur air dòigh sianal optigeach sònraichte a chuir sìos eadar oifis an neach-dèiligidh agus an ionad dàta againn, ”thuirt Alexander Tugov, Stiùiriche Leasachadh Seirbheisean aig Selectel. - Faodaidh an neach-dèiligidh cuideachd an siostam stòraidh aige a chuir air colocation ann an seòmar coimpiutair le modh ruigsinneachd sònraichte agus tagraidhean a ruith an dà chuid air na frithealaichean againn agus ann an sgòthan solaraichean cruinne AWS, MS Azure, Google Cloud. Gu dearbh, bidh an dàil chomharran anns a’ chùis mu dheireadh nas àirde na nam biodh siostam stòraidh an neach-dèiligidh suidhichte anns na SA, ach thèid ceangal bann-leathann ioma-sgòth a thoirt seachad. ”

Anns an ath artaigil bruidhnidh sinn mu fhuasgladh Kingston eile, a chaidh a thaisbeanadh aig taisbeanadh Supercomputing 2019 (Denver, Colorado, USA) agus a tha an dùil airson tagraidhean ionnsachadh innealan agus mion-sgrùdadh dàta mòr a ’cleachdadh GPUs. Is e seo teicneòlas GPUDirect Storage, a bheir seachad gluasad dàta dìreach eadar stòradh NVMe agus cuimhne pròiseasar GPU. Agus a bharrachd air an sin, mìnichidh sinn mar a chaidh againn air astar leughaidh dàta de 5.8 millean IOPS a choileanadh ann an siostam stòraidh raca air diosgan NVMe.

Airson tuilleadh fiosrachaidh mu thoraidhean Kingston Technology, tadhal air Làrach-lìn a ' chompanaidh a.

Source: www.habr.com