Mitä uudet arkistot AI- ja ML-järjestelmille tarjoavat?

MAX Data yhdistetään Optane DC:hen, jotta se toimisi tehokkaasti AI- ja ML-järjestelmien kanssa.

Mitä uudet arkistot AI- ja ML-järjestelmille tarjoavat?
Фото - Hitesh Choudhary - roiskeet pois

Päälle Mukaan MIT Sloan Management Reviewin ja The Boston Consulting Groupin tutkimuksen mukaan 85 % kolmesta tuhannesta tutkituista johtajista uskoo, että tekoälyjärjestelmät auttavat heidän yrityksiään saamaan kilpailuetua markkinoilla. Kuitenkin vain 39 % yrityksistä on yrittänyt toteuttaa jotain vastaavaa käytännössä.

Yksi syy tähän tilanteeseen on se, että tehokas työskentely datan kanssa ja kapasiteetin käytön optimointi koneoppimistehtäviin ei ole helppoa työtä. IDC:ssä merkkiettä uusi pysyvään muistiin perustuva tekniikka (Persistent Memory, PMEM) voisi ratkaista tilanteen.

Tätä tekniikkaa ovat ehdottaneet NetApp ja Intel, tuoda yhteen NetApp Memory Accelerated (MAX) Data ja Intel Optane DC -pysyvä muisti paikalliseen tallennustuotteeseen, joka perustuu pysyvään muistiin.

Kuinka tämä toimii

MAX Data on palvelintekniikka, joka parantaa sovellusten suorituskykyä käyttämällä PMEM- tai DRAM-muistia, mutta ei vaadi ohjelmiston uudelleenarkkitehtuuria.

Se toteuttaa automatisoidun porrastetun varastoinnin periaatteet, jakamalla tiedot tasoille ja tallennuspaikoille käyttötiheyden mukaan - "kylmille" tiedoille käytetään helpompaa tallennustilaa ja usein käytetyt ovat "käsillä" - pysyvässä muistissa, mikä minimoi. viive tällaisten tietojen kanssa työskenneltäessä.

Versio 1.1 käyttää DRAMia ja NVDIMM. Molemmilla toteutuksilla on haittapuolensa - suhteellinen tehokkuuden menetys ja vastaavasti korkea muistin hinta - verrattuna Optane DCPMM:ään. Esitetään kaavio, jossa on vertaileva arvio viivästymisestä täällä (s. 4).

Технология tukee и POSIX ja työskennellä lohko- tai tiedostojärjestelmien semantiikan kanssa. Tallennustason tietojen suojaus ja palautus toteutetaan MAX Snapilla ja MAX Recoveryllä. Nämä tekniikat käyttävät tilannekuvia, SnapMirror-työkalua ja muita ONTAP-suojausmekanismeja.

Kaavamaisesti toteutus näyttää tältä:

Mitä uudet arkistot AI- ja ML-järjestelmille tarjoavat?

Tässä järjestelmässä ei ole vielä PMEM:ää, mutta kehittäjät lupaavat lisätä tuen tämän tyyppisille muistille ennen vuoden loppua. Toistaiseksi Max Data toimii DRAM- ja DIMM-muistien kanssa.

Ratkaisupotentiaali

IDC:ssä vaatimusettä tulevina vuosina MAX Datan kaltaista kehitystä tulee lisää, sillä yritysdatan määrä kasvaa jatkuvasti, eikä yrityksillä ole tarpeeksi kapasiteettia käsitellä sitä tehokkaasti. Tekniikka voida hyödyllinen laajamittaisessa pilviympäristössä ja resurssiintensiivisten tehtävien, kuten hermoverkkojen harjoittelun, parissa. Se löytää sovelluksen kaupankäyntialustoilla, tietoturvajärjestelmissä ja kaikissa muissa ohjelmistotuotteissa, jotka vaativat jatkuvaa ja nopeaa pääsyä suuriin tietomääriin.

On myös todennäköistä, että teknologia ei heti juurruta markkinoille. Kuten edellä totesimme, vain kolmasosa yrityksistä maailmanlaajuisesti työskentelee tekoälyjärjestelmien kanssa tavalla tai toisessa. Tästä näkökulmasta katsottuna monet saattavat pitää MAX Datan syntymistä ennenaikaisena, ja se keskittää huomionsa helpommin saavutettavissa olevaan infrastruktuuriin, jonka avulla he voivat ratkaista nykyiset ongelmat.

Muut materiaalimme IT-infrastruktuurista:

Lähde: will.com

Lisää kommentti