[Supercomputing 2019]. Panyimpenan multi-awan salaku daérah aplikasi pikeun drive Kingston DC1000M énggal

Bayangkeun yén anjeun ngaluncurkeun bisnis médis anu inovatif - pilihan ubar individu dumasar kana analisa génom manusa. Unggal pasien ngagaduhan 3 milyar pasangan gen, sareng server biasa dina prosesor x86 bakal nyandak sababaraha dinten kanggo ngitung. Anjeun terang yén anjeun tiasa nyepetkeun prosés dina server kalayan prosésor FPGA anu parallelizes itungan dina rébuan benang. Bakal ngalengkepan itungan génom dina ngeunaan hiji jam. Server sapertos kitu tiasa disewa tina Amazon Web Services (AWS). Tapi ieu hal: palanggan, rumah sakit, sacara kategoris ngalawan nempatkeun data genetik dina awan panyadia. Naon anu kedah abdi lakukeun? Kingston sareng ngamimitian awan nunjukkeun arsitéktur dina paméran Supercomputing-2019 Panyimpenan MultiCloud Pribadi (PMCS), nu solves masalah ieu.

Tilu kaayaan pikeun komputasi kinerja luhur

Ngitung génom manusa sanés hiji-hijina tugas dina widang komputasi kinerja tinggi (HPC, High Performance Computing). Élmuwan ngitung widang fisik, insinyur ngitung suku cadang pesawat, pemodal ngitung modél ékonomi, sareng babarengan nganalisa data ageung, ngawangun jaringan saraf, sareng ngadamel seueur itungan kompleks anu sanés.

Tilu kaayaan HPC nyaéta kakuatan komputasi anu ageung, panyimpen anu ageung sareng gancang, sareng throughput jaringan anu luhur. Ku alatan éta, prakték baku pikeun ngalakonan itungan LPC aya di puseur data parusahaan sorangan (on-premises) atawa di panyadia dina awan.

Tapi teu sakabeh pausahaan boga puseur data sorangan, sarta maranéhanana anu ngalakukeun mindeng inferior mun puseur data komérsial dina watesan efisiensi sumberdaya (expenditures modal diperlukeun pikeun meuli jeung ngamutahirkeun hardware jeung software, mayar tanaga mumpuni tinggi, jsb). Panyadia awan, sabalikna, nawiskeun sumber IT dumasar kana modél biaya operasi "Pay-as-you-go", nyaéta. nyéwa ditagihkeun ngan pikeun période pamakean. Nalika itungan réngsé, server tiasa dipiceun tina akun éta, ku kituna ngahémat anggaran IT. Tapi upami aya larangan législatif atanapi perusahaan pikeun mindahkeun data ka panyadia, komputasi HPC dina méga henteu sayogi.

Panyimpenan MultiCloud wasta

Arsitéktur Panyimpenan MultiCloud Pribadi dirarancang pikeun nyayogikeun aksés kana jasa awan bari sacara fisik nyéépkeun data sorangan dina situs perusahaan atanapi dina kompartemen aman anu misah tina pusat data nganggo jasa kolokasi. Intina, éta mangrupikeun modél komputasi data-centric anu disebarkeun dimana server awan tiasa dianggo sareng sistem panyimpen jauh tina awan pribadi. Sasuai, ngagunakeun panyimpen data lokal anu sami, anjeun tiasa damel sareng jasa awan ti panyadia panggedéna: AWS, MS Azure, Google Cloud Platform, jsb.

Némbongkeun conto palaksanaan PMCS dina paméran Supercomputing-2019, Kingston nampilkeun sampel sistem panyimpenan data kinerja tinggi (SSD) dumasar kana drive DC1000M SSD, sarta salah sahiji startups awan dibere StorOne S1 software manajemén pikeun software- panyimpen anu ditetepkeun sareng saluran komunikasi khusus sareng panyadia awan utama.

Perlu dicatet yén PMCS, salaku modél kerja komputasi awan sareng panyimpenan pribadi, dirancang pikeun pasar Amérika Kalér kalayan konektipitas jaringan anu dikembangkeun antara pusat data anu dirojong dina infrastruktur AT&T sareng Equinix. Ku kituna, ping antara sistem panyimpen kolokasi dina titik Equinix Cloud Exchange sareng awan AWS kirang ti 1 milidetik (sumber: ITProToday).

Dina demonstrasi arsitéktur PMCS anu dipidangkeun dina pameran, sistem panyimpen dina disk DC1000M NVMe lokasina di colocation, sareng mesin virtual dipasang dina awan AWS, MS Azure, sareng Google Cloud Platform, anu silih ping. Aplikasi klien-server jarak jauh digawekeun ku sistem panyimpen Kingston sareng server HP DL380 di pusat data sareng, ngalangkungan infrastruktur saluran komunikasi Equinix, ngaksés platform awan tina panyadia utama anu disebatkeun di luhur.

Geser tina presentasi Private MultiCloud Storage dina paméran Supercomputing-2019. Sumber: Kingston

Parangkat lunak anu fungsionalitas anu sami pikeun ngatur arsitéktur panyimpenan multicloud swasta ditawarkeun ku perusahaan anu béda. Istilah pikeun arsitéktur ieu ogé tiasa disada béda - Panyimpenan MultiCloud Pribadi atanapi Panyimpenan Pribadi pikeun Awan.

"Superkomputer dinten ieu ngajalankeun rupa-rupa aplikasi HPC anu aya di payuneun kamajuan, ti eksplorasi minyak sareng gas ka ramalan cuaca, pasar finansial sareng pamekaran téknologi anyar," saur Keith Schimmenti, manajer manajemén SSD perusahaan di Kingston. "Aplikasi HPC ieu ngabutuhkeun pertandingan anu langkung ageung antara kinerja prosesor sareng kecepatan I/O. Kami reueus ngabagikeun kumaha solusi Kingston ngabantosan narabas dina komputasi, nganteurkeun kinerja anu diperyogikeun dina lingkungan sareng aplikasi komputasi anu paling ekstrim di dunya.

DC1000M drive sareng conto sistem panyimpenan dumasar kana éta

DC1000M U.2 NVMe SSD dirancang ku Kingston pikeun pusat data sareng dirancang khusus pikeun aplikasi data-intensif sareng HPC sapertos kecerdasan buatan (AI) sareng aplikasi pembelajaran mesin (ML).

DC1000M U.2 NVMe 3.84TB drive. Sumber: Kingston

DC1000M U.2 drive dumasar kana 96-lapisan Intel 3D NAND memori, dikawasa ku Silicon Motion SM2270 controller (PCIe 3.0 jeung NVMe 3.0). Silicon Motion SM2270 mangrupikeun pengendali NVMe perusahaan 16-jalur sareng panganteur PCIe 3.0 x8, beus data DRAM 32-bit sareng tilu prosesor ganda ARM Cortex R5.

DC1000M tina kapasitas anu béda ditawarkeun pikeun dileupaskeun: ti 0.96 dugi ka 7.68 TB (kapasitas anu paling populér dipercaya nyaéta 3.84 sareng 7.68 TB). Kinerja drive diperkirakeun 800 rébu IOPS.

Sistim gudang kalawan 10x DC1000M U.2 NVMe 7.68 TB. Sumber: Kingston

Salaku conto sistem panyimpen pikeun aplikasi HPC, Kingston nampilkeun dina Supercomputing 2019 solusi rak kalayan 10 drive DC1000M U.2 NVMe, masing-masing kalayan kapasitas 7.68 TB. Sistim gudang dumasar kana SB122A-PH, platform faktor formulir 1U ti AIC. Prosesor: 2x Intel Xeon CPU E5-2660, Kingston DRAM 128 GB (8x16 GB) DDR4-2400 (Jumlah Bagian: KSM24RS4 / 16HAI). OS dipasang nyaéta Ubuntu 18.04.3 LTS, Linux kernel ver 5.0.0-31. Test gfio v3.13 (Fléksibel I / O tester) némbongkeun kinerja maca 5.8 juta IOPS kalawan throughput 23.8 Gbps.

Sistem panyimpen anu dipidangkeun nunjukkeun ciri anu pikaresepeun dina hal maca stabil 5,8 juta IOPS (operasi input-output per detik). Ieu dua ordo gedéna leuwih gancang ti SSD pikeun sistem pasar massa. Laju maca ieu dipikabutuh pikeun aplikasi HPC anu dijalankeun dina prosesor khusus.

Komputasi awan HPC sareng panyimpenan pribadi di Rusia

Tugas ngajalankeun komputasi-kinerja tinggi di panyadia, tapi sacara fisik nyimpen data dina enggon, oge relevan pikeun pausahaan Rusia. Kasus umum anu sanés dina bisnis domestik nyaéta nalika, nalika nganggo jasa awan asing, data kedah aya di daérah Féderasi Rusia. Kami naroskeun koméntar ngeunaan kaayaan ieu atas nama panyadia awan Selectel salaku pasangan anu lami Kingston.

"Dina Rusia, kasebut nyaéta dimungkinkeun pikeun ngawangun arsitéktur sarupa, kalayan layanan dina Rusia jeung sagala dokumén ngalaporkeun pikeun departemén akuntansi klien urang. Upami perusahaan kedah ngalaksanakeun komputasi berprestasi tinggi nganggo sistem panyimpen di tempat, kami di Selectel nyéwa server sareng prosesor tina sababaraha jinis, kalebet FPGA, GPU atawa CPUs multi-core. Salaku tambahan, ngalangkungan mitra, kami ngatur peletakan saluran optik khusus antara kantor klien sareng pusat data kami, ”koméntar Alexander Tugov, Diréktur Pangembangan Layanan di Selectel. - Klién ogé tiasa nempatkeun sistem panyimpen na dina colocation di kamar komputer kalayan modeu aksés khusus sareng ngajalankeun aplikasi dina server kami sareng dina awan panyadia global AWS, MS Azure, Google Cloud. Tangtosna, tunda sinyal dina kasus anu terakhir bakal langkung luhur tibatan upami sistem panyimpen klien aya di AS, tapi sambungan multi-awan broadband bakal disayogikeun.

Dina artikel salajengna urang bakal ngobrol ngeunaan solusi Kingston sejen, nu dibere dina paméran Supercomputing 2019 (Denver, Colorado, AS) jeung dimaksudkeun pikeun aplikasi mesin learning jeung analisis data badag maké GPUs. Ieu téknologi Panyimpenan GPUDirect, anu nyayogikeun transfer data langsung antara panyimpenan NVMe sareng mémori prosesor GPU. Salaku tambahan, kami bakal ngajelaskeun kumaha urang tiasa ngahontal kecepatan maca data 5.8 juta IOPS dina sistem panyimpenan rak dina disk NVMe.

Kanggo inpo nu langkung lengkep ihwal produk Kingston Technology, hubungi: Situs perusahaan.

sumber: www.habr.com