[Supercomputing 2019]. Hilberîna pir-ewra wekî qada serîlêdanê ji bo ajokarên nû Kingston DC1000M

Bifikirin ku hûn karsaziyek bijîjkî ya nûjen didin destpêkirin - hilbijartina kesane ya dermanan li ser bingeha analîzkirina genoma mirovî. Her nexweş 3 mîlyar cotên genê hene, û serverek birêkûpêk li ser pêvajoyên x86 dê çend rojan bigire ku meriv hesab bike. Hûn dizanin ku hûn dikarin pêvajoyek li ser serverek bi pêvajoyek FPGA-ya ku hesabên bi hezaran mijaran re paralel dike lez bikin. Ew ê di nav saetekê de hesabê genomê temam bike. Pêşkêşkerên weha dikarin ji Karûbarên Webê yên Amazon (AWS) werin kirêkirin. Lê li vir tişt ev e: xerîdar, nexweşxane, bi kategorî li dijî danîna daneyên genetîkî di ewrê pêşkêşker de ye. Derewînê bedew û biçûk? Destpêka Kingston û ewr mîmarî li pêşangeha Supercomputing-2019 nîşan da Hilberîna Taybet a MultiCloud (PMCS), ku vê pirsgirêkê çareser dike.

Sê şertên ji bo komputera performansa bilind

Hesabkirina genoma mirovan ne tenê kar e di warê hesabkirina bi performansa bilind (HPC, Computing Performansa Bilind). Zanyar zeviyên fizîkî dihejmêrin, endezyar perçeyên balafiran dihejmêrin, fînanser modelên aborî dihejmêrin, û bi hev re ew daneyên mezin analîz dikin, torên neuralî ava dikin, û gelek hesabên din ên tevlihev dikin.

Sê şertên HPC-ê hêza hesabkirinê ya pir mezin, hilanîna pir mezin û bilez, û berbi torê ya bilind in. Ji ber vê yekê, pratîka standard ji bo meşandina hesabên LPC-ê li navenda daneya pargîdanî (li hundur) an li pêşkêşkerek di ewr de ye.

Lê ne hemî pargîdanî navendên daneya xwe hene, û yên ku pir caran dikin ji hêla karbidestiya çavkaniyê ve ji navendên daneya bazirganî kêmtir in (lêçûnên sermayê ji bo kirîn û nûvekirina hardware û nermalavê, dravdana ji bo personelên pir jêhatî, hwd.) Berevajî vê, pêşkêşkerên cloudê, çavkaniyên IT-ê li gorî modela lêçûna xebitandinê ya "Pay-as-you-go" pêşkêş dikin, ango. kirê tenê ji bo heyama bikaranînê tê girtin. Dema ku hesab qediyan, server dikare ji hesabê were rakirin, bi vî rengî budceyên IT-ê xilas bike. Lê heke qedexeyek zagonî an pargîdanî ya li ser veguheztina daneyê ji pêşkêşker re hebe, hesabkirina HPC di ewr de peyda nabe.

Hilberîna Taybet a MultiCloud

Mîmariya Taybet a MultiCloud Storage ji bo peydakirina gihîştina karûbarên cloudê hatî çêkirin dema ku bi fizîkî daneya xwe li ser malpera pargîdaniyê an jî li navendek ewledar a cihêreng a navenda daneyê bi karanîna karûbarek hevgirtinê dihêle. Di bingeh de, ew modelek berhevkarê belavkirî ya dane-navendî ye ku serverên ewr bi pergalên hilanînê yên dûr ên ji ewrek taybet re dixebitin. Li gorî vê yekê, bi karanîna heman hilanîna daneya herêmî, hûn dikarin bi karûbarên cloudê yên ji pêşkêşkerên herî mezin re bixebitin: AWS, MS Azure, Google Cloud Platform, hwd.

Nimûneyek pêkanîna PMCS li pêşangeha Supercomputing-2019 nîşan dide, Kingston nimûneyek pergala hilanîna daneya performansa bilind (SSD) li ser bingeha ajokarên SSD-ê DC1000M pêşkêşî dike, û yek ji destpêka ewr nermalava rêveberiya StorOne S1 ji bo nermalavê- bi pêşkêşkerên sereke yên ewr re kanalên hilanînê û ragihandinê yên diyarkirî.

Pêdivî ye ku were zanîn ku PMCS, wekî modelek xebitandinê ya hesabkirina ewr a bi hilanîna taybet, ji bo sûka Amerîkaya Bakur bi pêwendiya torê ya pêşkeftî ya di navbera navendên daneyê de ku li ser binesaziya AT&T û Equinix-ê tê piştgirî kirin, hatî çêkirin. Bi vî rengî, ping di navbera pergalek hilanînê ya hevoksaziyê de di her girêkek Equinix Cloud Exchange û ewrê AWS de ji 1 millisecond kêmtir e (çavkanî: ITProToday).

Di xwenîşandana mîmariya PMCS de ku li pêşangehê hatî xuyang kirin, pergala hilanînê ya li ser dîskên DC1000M NVMe di nav hev de cih girt, û makîneyên virtual di ewrên AWS, MS Azure û Platforma Google Cloud de hatin saz kirin, ku hevûdu ping dikirin. Serlêdana xerîdar-server ji dûr ve bi pergala hilanînê Kingston û serverên HP DL380 di navenda daneyê de xebitî û, bi navgîniya binesaziya kanala ragihandinê ya Equinix, gihîştiye platformên ewr ên pêşkêşkerên sereke yên jorîn.

Li pêşangeha Supercomputing-2019-ê ji pêşkêşkirina Hilberîna Taybet a MultiCloud-ê slide. Çavkanî: Kingston

Nermalava fonksiyonên wekhev ên ji bo birêvebirina mîmariya hilanîna multicloud-a taybet ji hêla pargîdaniyên cihêreng ve têne pêşkêş kirin. Mercên ji bo vê mîmariyê jî dikarin cûda deng bidin - Veguheztina Taybet a MultiCloud an Rakirina Taybet a ji bo Cloud.

Keith Schimmenti, rêveberê rêveberiya SSD ya pargîdanî li Kingston, got: "Superkomputerên îroyîn cûrbecûr sepanên HPC-yê yên ku di pêşkeftinên pêşîn de ne, ji lêgerîna neft û gazê bigire heya pêşbînkirina hewayê, bazarên darayî û pêşkeftina teknolojiya nû dimeşînin." "Van serîlêdanên HPC-ê di navbera performansa pêvajoyê û leza I/O de pêwendiyek pir mezintir hewce dike. Em şanaz in ku parve dikin ka çareseriyên Kingston çawa dibe alîkar ku pêşkeftinên di komputerê de peyda bikin, performansa ku di hawîrdor û sepanên hesabker ên herî tund ên cîhanê de hewce dike peyda dikin.

DC1000M ajoker û mînakek pergala hilanînê ku li ser bingeha wê ye

DC1000M U.2 NVMe SSD ji hêla Kingston ve ji bo navenda daneyê hatî sêwirandin û bi taybetî ji bo serîlêdanên daneya-zirav û HPC yên wekî sepanên îstîxbarata sûnî (AI) û fêrbûna makîneyê (ML) hatî çêkirin.

DC1000M U.2 NVMe 3.84TB ajoker. Çavkanî: Kingston

Ajokarên DC1000M U.2 li ser bingeha bîranîna Intel 96D NAND ya 3-layer in, ku ji hêla kontrolkerek Silicon Motion SM2270 (PCIe 3.0 û NVMe 3.0) ve têne kontrol kirin. Silicon Motion SM2270 bi navgîniya PCIe 16 x3.0, otobusa daneya DRAM-ê ya 8-bit û sê pêvajoyên dualî ARM Cortex R32, kontrolkerek NVMe ya pargîdanî ya 5-lane ye.

DC1000M kapasîteyên cihêreng ji bo berdanê têne pêşkêş kirin: ji 0.96 heta 7.68 TB (kapasîteyên herî populer têne bawer kirin ku 3.84 û 7.68 TB). Performansa ajotinê bi 800 hezar IOPS tê texmîn kirin.

Pergala hilanînê bi 10x DC1000M U.2 NVMe 7.68 TB. Çavkanî: Kingston

Wekî mînakek pergala hilanînê ya ji bo serîlêdanên HPC, Kingston di Supercomputing 2019 de çareseriyek rack bi 10 ajokarên DC1000M U.2 NVMe, her yek bi kapasîteya 7.68 TB pêşkêşî kir. Pergala hilanînê li ser bingeha SB122A-PH, platformek faktora forma 1U ya ji AIC-ê ye. Pêvajo: 2x Intel Xeon CPU E5-2660, Kingston DRAM 128 GB (8x16 GB) DDR4-2400 (Hejmara Part: KSM24RS4/16HAI). OS-ya hatî saz kirin Ubuntu 18.04.3 LTS, kernel Linux ver 5.0.0-31 e. Testa gfio v3.13 (Testêra I/O ya Flexible) performansa xwendinê ya 5.8 mîlyon IOPS bi rêjeyek 23.8 Gbps nîşan da.

Pergala hilanînê ya pêşkêşkirî di warê xwendina stabîl a 5,8 mîlyon IOPS (operasyonên têketin-derketinê serê saniyeyê) de taybetmendiyên balkêş nîşan da. Ev ji bo pergalên bazara girseyî ji SSD-ê du rêzikên mezinbûnê zûtir e. Ev leza xwendinê ji bo serîlêdanên HPC-ê ku li ser pêvajoyên pispor têne xebitandin hewce ye.

Cloud Computing HPC bi hilanîna taybet li Rûsyayê

Wezîfeya pêkanîna hesabkirina bi performansa bilind li pêşkêşkerê, lê bi fizîkî hilanîna daneyên li ser cîhê, ji bo pargîdaniyên rûsî jî têkildar e. Di karsaziya navxweyî de bûyerek din a hevpar ev e ku dema ku, dema ku karûbarên cloudê yên biyanî bikar tînin, pêdivî ye ku dane li ser axa Federasyona Rûsyayê bin. Me li ser navê pêşkêşkarê cloudê Selectel wekî hevkarek demdirêj a Kingston şîroveya van rewşan pirsî.

"Li Rûsyayê, bi karûbarê bi rûsî û hemî belgeyên raporê yên ji bo beşa hesabê xerîdar, mimkun e ku mîmariyek wekhev were çêkirin. Ger pêdivî ye ku pargîdaniyek bi karanîna pergalên hilanînê yên li hundurê hesabkirina performansa bilind pêk bîne, em li Selectel serverên bi pêvajoyên cûrbecûr, di nav de FPGA, GPU an CPU-yên pir-core. Wekî din, bi riya hevalbendan, em danîna kanalek optîkî ya diyarkirî di navbera ofîsa xerîdar û navenda meya daneyê de organîze dikin," Alexander Tugov, Rêveberê Pêşkeftina Karûbaran li Selectel şîrove dike. - Di heman demê de xerîdar dikare pergala hilanînê ya xwe li ser hevgirtinê li jûreyek komputerê bi moda gihîştina taybetî bi cîh bike û hem li ser serverên me hem jî di ewrên pêşkêşkerên gerdûnî AWS, MS Azure, Google Cloud de bimeşîne. Bê guman, derengiya sînyalê di doza paşîn de dê ji ya ku pergala hilanînê ya xerîdar li DY-yê bûya, zêdetir be, lê dê pêwendiyek pir-ewra berfereh were peyda kirin.

Di gotara din de em ê li ser çareseriyek din a Kingston biaxivin, ku li pêşangeha Supercomputing 2019 (Denver, Colorado, USA) hate pêşkêş kirin û ji bo serîlêdanên fêrbûna makîneyê û analîzkirina daneya mezin a bi karanîna GPU-yê ve hatî armanc kirin. Ev teknolojiya GPUDirect Storage e, ku veguheztina daneya rasterast di navbera hilanînê NVMe û bîranîna pêvajoya GPU de peyda dike. Wekî din, em ê rave bikin ka me çawa bigihîje leza xwendina daneyê ya 5.8 mîlyon IOPS di pergalek hilanînê ya li ser dîskên NVMe de.

Ji bo bêtir agahdarî li ser hilberên Teknolojiya Kingston, ji kerema xwe biçin Malpera pargîdaniyê.

Source: www.habr.com