Hodie loquemur quomodo optimum sit condere notitias in mundo in quo retiacula quinta generationis, spec- tatoria et autocineta et autocineta plus notitiae in die gignunt quam omnes homines ante revolutionem industrialem generatae.
Mundus noster magis ac magis notitias generat. Pars eius labilis et celerrime colligitur. Altera longior debet recondi, altera vero omnino "per saecula" designata est - saltem illud quomodo a praesenti conspicimus. Informatio fluit in centris notitiarum habita tali celeritate ut quaevis nova aditus, quaevis technologia ut huic infinitae "postulationis" occurrat, celeriter obsolescat.
XL annos repono progressio distributa
Prima tabulata retis in forma familiaria nobis in 1980s apparuit. Multi ex vobis invenimus trans NFS (Ratio fasciculi Network), AFS (Andreas File System) seu Coda. Post decennium, formas et technologias mutaverunt, et systemata fasciculi distributa dederunt ut systemata reponendi aggregata ex GPFS (Parallel Systema fasciculi Generalis), CFS (Classip fasciculi) et StorNext. Fundamentum, schedulae schedulae architecturae classicae adhibitae sunt, quarum una ratio fasciculi in strato programmate creatus est. Hae et similes solutiones adhuc adhibentur, earum angulum occupant ac prorsus exigunt.
In insequente millennii, paradigma repono distributum aliquantum mutavit, et systemata cum SN (Shared-Nihil) architectura plumbum accepit. Transitus e botri repono ad repositiones nodis separatis, quae, ut fere, servitores classici cum programmate certae tabularum praebet; talia principia aedificantur, inquam, HDFS (Hadoop Systema fasciculi distributum) et GFS (Ratio fasciculi globalis).
Propius ad 2010, conceptus systematum repositionum subiacentium in dies magis magisque reflecti coeperunt in productis mercatoriis plenis mobilibus, qualia sunt VMware vSAN, Dell EMC Isilon, et nostra. . Post suggesta memorata non amplius est communitas enthusiastarum, sed venditores specifici qui responsales sunt ad functionem, sustentationem, servitium sustentationem operis, et ulteriorem progressionem spondent. Tales solutiones in pluribus locis maxime postulant.
Telecom operators
Fortasse unus ex vetustissimis sumptis systematis repositionis distributae sunt operariorum telecomium. Tabula monstrat quibus coetus applicationum molem notitiae edunt. OSS (Operationes Support Systems), MSS (administratio Services Support) et BSS (Business Support Systems) sunt tres ordines programmandi complementarii ad servitium partus subscribentes requisiti, renuntiatio pecuniaria provisori, et operativa sustentatio fabrum operantis.
Saepe notitia horum stratorum valde inter se mixta est, et ad vitandam collectionem exemplarium superfluorum, stormata distributa sunt quae totam copiam notitiarum quae ex retis operariis cumulant. Tabulationes in piscinam communem componuntur, ad quam omnia officia accessus.
Nostrae calculi ostendunt transitum e systematibus classicis ad systemata repositionis obstacula permittere te servare usque ad 70% de budget tantum, relinquendo systematum reponendi hi fine dedicatum et utens institutis servientibus architecturae classicae (plerumque x86), operando in coniunctione cum specialioribus. institutio. Operatores cellularum huiusmodi solutiones in codicibus significantibus satis diu quaesiverunt. Praesertim, operatores Russici tales fructus ab Huawei plus quam sex annos usi sunt.
Ita, plures functiones exerceri non possunt utentes systemata distributa. Exempli gratia, auctis peractis requisitis vel convenientiae cum protocols antiquioribus. Sed saltem 70% notitiarum quas processus operantis in piscina distributa poni potest.
fretus sector
In quavis ripa, multae IT rationes diversae sunt, vndique ab expediendo ad systema argentarium automated. Haec infrastructura etiam cum ingenti rerum notitiarum copia laborat, cum pleraque negotia non requirunt auctam perficiendi ac firmitatem systematum repono, ut evolutionem, probationem, automationem officii processuum, etc. Hic usus systematum repositionis classicae fieri potest. sed omnibus annis minus ac minus utile est. Praeterea, hoc in casu, nulla est flexibilitas in exigendis facultatibus repono, quae faciendae computantur ab onere summo.
Cum utens systemata repono distributa, eorum nodi, qui re vera servi ordinarii sunt, quovis tempore converti possunt, exempli gratia, in servitorem fundum et pro suggestu computatorio.
Mauris lacus
Tabula supra indicem usorum servitii typici ostendit. . Haec officia e-regiminis esse possunt (exempli gratia "Gosuslugi"), conatibus digitalizationibus, structuris oeconomicis, etc. Omnes hae opus sunt magnis voluminibus notitiarum heterogenearum laborantium.
Operatio systematum repositionis classicae ad huiusmodi problemata solvenda inhabilis est, quia tam summus perficientur accessus ad databases angustos et regularis accessus ad bibliothecas documentorum lustratorum pro obiectis necessariis reponitur. Hic, exempli gratia, systema ordinis per telam portae ligari potest. Ad haec omnia efficiendum in suggestu repositionis classicae, magna copia instrumentorum ad varia opera opus erit. Una systematis repono universalis horizontalis omnia opera antea recensita facile comprehendere potest: vos tantum postulo ut in eo plures lacunas cum notis repono diversis creare possit.
Generantibus novae informationes
Moles notitiarum in mundo conditarum circiter 30% per annum crescit. Bonum nuntium pro venditoribus repono, sed quis est et erit fons principalis huius notitiae?
Decem abhinc annis, retia socialia talia generantibus facta sunt, quae creari debebant magnum numerum novorum algorithmorum, solutionum ferramentorum, etc. Nunc tres principales rectores incrementi repono. Primum est nubes computandi. In statu, circiter 70% societatum nubeculae officia utuntur uno vel alio modo. Hae possunt esse systemata electronica, tergum, aliaque entia virtualizata.
Quinta retia generationis secundae exactoris fiunt. Hae sunt novae velocitates et nova volumina notitiae translationis. Secundum praenotiones nostras, adoptio 5G diffusa stillam ducet in postulatione chartarum ictuum memoriae. Quantumcumque memoria in phone est, adhuc desinit, et si gadget canalem 100-megabit habet, imagines localiter condere non oportet.
Tertius ordo causarum est cur postulatio systematis repono crescens includat rapidam progressionem intelligentiae artificialis, transitus ad magnas notitias analyticas et inclinatio ad automationem universalem omnium rerum quae possibilis sunt.
Pluma "novi negotiationis" est suum . Hanc notitiam condere necesse est sine eius forma ullo modo definiendo. Requiritur tantum sequens lectio. Exempli gratia, ratio argentaria scoringis ad quantitatem mutui praesto definiendam spectabit imagines quas in retiacula sociales missas determinans quotiens ad mare et popinae fueris, et simul investigare excerpta e documentis medicinis sibi praesto. Haec notitia ab una parte comprehenduntur, ex altera vero homogeneitate carent.
Ad Oceanum de notitia informis
Quaenam sunt difficultates, quas exitus "novarum notitiarum" secumfert? Prima in illis, nimirum, est moles notitiarum ipsius ac tempus Γ¦stimationis eius repositionis. Hodierna autocineta autocineta sola currus generat usque ad 60TB notitiarum cotidie ab omnibus sensoriis et machinationibus eius. Ad novum motum algorithmorum evolvendum, haec indicia intra eundem diem procedenda sunt, alioquin cumulare incipiet. Eodem tempore diutissime condi debet - lustris. Tantum ergo poterit concludere ex magnis exemplis analyticis in futuro.
Vna fabrica sequentium geneticarum explicandi circiter 6 terabytes per diem producit. Et notitia eius ope collecta omnino deletionem non implicat, id est hypothesim, in perpetuum reponantur.
Omnes denique eiusdem quintae retiae generationis. Praeter notitias ipsas transmissas, talis retis est ipsa notitia generantis ingens: acta activitatis, monumenta vocant, intermedia eventus machinae interationes, etc.
Haec omnia requirit evolutionem novorum accessuum et algorithmorum ad informationes recondendas et dispensandas. Talis autem aditus emergit.
Technologiae novae aetatis
Tres coetus solutionum destinati obire novis requisitis pro informationibus systematis repositionis distingui possunt: ββintroductio intelligentiae artificialis, evolutionis technicae instrumentorum repono, et innovationes in campo architecturae systematis. AI cum sit amet.
In novis Huawei solutionibus, intellegentiae artificialis iam usus est in ambitu ipsius repositionis, quae cum processus AI instructa est, qui systema suum independenter analysi et defecta praedicit. Si systema repositionis coniungitur cum ministerio nubis quae facultates computandi significantes habet, intelligentia artificialis magis informationes procedere potest ac subtilitatem suarum hypothesium emendare.
Praeter defectis, talis AI futurum apicem oneris praedicere potest et tempus manens donec capacitas defatigat. Hoc sino vos ad optimize perficiendi et scandendi rationem antequam invitis eventibus accidat.
Nunc de evolutione tabellariorum notitiae. Primae aurae ictuum SLC (Single-Level Cell) technicae artis factae sunt. Cogitationes in ea fundatae erant celeriter, certae, stabiles, sed parvae capacitatis et valde pretiosae erant. Augmentum in pretio ac diminutione per certas concessiones technicas consecutum est, ob quas celeritas, commendatio et vita actorum imminuta sunt. Nihilominus inclinatio ipsa systemata repono non afficiebat, quae, ob varias artificia architecturae generatim factae sunt et fructuosiores et certiores.
Sed quare opus est omnibus-Flash systemata classium repono? Annon satis erat modo veteres HDDs in systemate iam currenti cum novis SSDs eiusdem formae factoris reponere? Hoc requirebatur ut omnes facultates novarum SSDs efficaciter uterentur, quae in systematibus antiquioribus simpliciter impossibile erat.
Huawei, exempli gratia, plures technologiae elaboraverunt ad solvendum hoc problema, e quibus unum est quae effecit ut interationes orbis moderatoris quam maxime optimize possent.
identificatio intellectus perfecit ut data in plures rivos putrescere et obire cum pluribus phaenomenis commodis, ut (Scribe amplificationem). Eodem tempore nova algorithmarum recuperatio in specie celeritatem aedificandi auxit, tempus suum ad bona omnino parva reducens.
Defectum, mersionem, purgamentum collectionis - hae factores etiam non amplius afficiunt rationum repositionis observantiam propter specialem elegantiam moderatoris.
Et obstructionum data stores parant ad occursum . Recole classicorum schema pro data accessu ordinandi hoc modo operatum: processus accesserat RAID moderatoris per PCI Expressi bus. Quod vicissim cum disci mechanicis per SCSI vel SAS interact. Usus NVMe in backend signanter acceleravit totum processum, sed unum incommodum portavit: agitationes ad processum directe pertinere debent ut accessum directam memoriam praebeat.
Proxima periodus technologiae evolutionis, quam nunc cernimus, usus est NVMe-oF (NVMe super Fabrics). Huawei technologias claudentes, iam FC-NVMe (NVMe super Fiber Channel), et NVMe super RoCE (RDMA supra Converged Ethernet) in via sunt. Specimina probatio satis functionis sunt, pauci menses ante officialem suum relinquuntur. Nota haec omnia etiam in systematibus distributis apparebunt, ubi "Aer sine damno" in magna petitione erit.
Additus modus ad optimize opera stormariorum distributa erat tota repudiatio notitiarum speculorum. Huawei solutiones n exemplaribus iam non utuntur, ut in usitate INCURSIO 1, et omnino ad mechanismum transibit (Erasura coding). Peculiaris sarcina mathematica computat imperium caudices cum quadam frequentia, quae te permittit ut notitias intermedias in casu damni restituas.
Deduplicatio et compressio machinae faciendae fiunt. Si in systemata classica repositionis numero processuum institutorum moderatoris circumscribuntur, tum in systematis repono scalabiles horizontaliter distributis, quilibet nodi continet omnia quae desideras: orbis, memoriae, processores et internecti. Hae facultates sufficiunt ad deduplicationem et compressionem ad minimam ictum in effectu.
Aliquam et efficitur odio, eu volutpat elit. Hic onus in processoribus centralibus reducere licuit ope microcircuitum dedicatorum additorum (vel caudices in ipso processus dedicato), qui partes agunt. (TCP/IP Offload Engine) vel susceptis operibus mathematicam EC, deduplicationem et compressionem.
Novi accessus ad notitias repositionis in architectura disaggregato (distributa) incorporantur. In systematis repono centralised officina server connexa per Fibre Channel est cum multis vestit. Incommoda huius adventus sunt difficultates scalis ac providens certos servitii gradus (secundum observantiam vel latentiam). Systemata hyperconvergiae eadem exercitia utuntur ad informationes et repositiones et processus. Haec fere illimitata dat spatia ad scalas, sed magnos sumptus secumfert ad integritatem servandam datam.
Secus utrumque, disaggregata architectura importat partiare systema in conputare officinas et ratio horizontalis repono. Hoc commoda utriusque architecturae praebet ac fere illimitata concedit tantum elementi scalas cuius effectus non sufficit.
Ab integratione ad concursum
Negotium classicum, cuius momentum in praeteritum 15 annos tantum crevit, opus est ut simul ad repono impedimentum, accessum fasciculi, accessum ad res, operandi fundi pro magnis data, vico in placenta can. etiam sit, exempli gratia, ratio tergum magneticae magneticae.
In primo gradu, sola administratio horum servitiorum adunari potuit. Systema reponendi heterogenea clausa sunt quibusdam programmatibus specialibus, per quos administrator facultates ex lacunis in promptu distribuit. Sed cum hae piscinae ferramentis dispares essent, impossibile erat inter eos onus migrare. In altiori gradu integrationis, consolidatio facta est in massa portae. Si accessus lima communis erat, per varia protocolla donari poterat.
Methodus antecedens confluentiae praesto nobis nunc implicat creationem systematis universalis hybrid. Quemadmodum nostrum esse . Accessus universalis iisdem opibus ferramentis utitur, logice in diversa piscinas divisa, sed ad migrationem oneris permittens. Haec omnia fieri possunt per unam administrationem consolandi. Hoc modo efficere potuimus ut notionem "unae centri datae - una ratio repono".
Sumptus notitia repono nunc multas decisiones architecturae determinat. Et quamvis tuto in fronte poni possit, agimus "vivere" repositione cum accessu activo hodie, ideo etiam ratio habenda est. Alia magni momenti proprietas systemata sequentium generationum distributa est adunatio. Post omnes, nemo vult varias rationes disparatas a diversis solaribus tractatas habere. Omnes hae qualitates in nova serie productorum Huawei involvuntur. .
Generationis massa repono
OceanStor Pacific sex novenas occurrit (99,9999%) requisitis firmitatis et adhiberi potest ad centrum classis creare HyperMetro. Distantia inter duo centra data usque ad 100 km, systemata demonstrant additam moram 2 ms, quae sinit solutiones quaslibet calamitates-probationis in eis fundatas construere, iis etiam cum servientibus.
Producta novae seriei versabilitatem in terminis protocolla demonstrant. Iam OceanStor 100D subsidia obstruunt accessum, obiecto accessum, et accessum Hadoop. Accessus tabellae in proximo futuro efficietur. Non necesse est ut multiplices notitiarum exemplaria si per varias protocolla edici possint.
Videtur quod notio "retis damni" pertineat ad repono? Res ita est, quod systemata repono distributa aedificantur secundum reticulum ieiunium quod opportunis algorithms et mechanismum RoCE sustinet. Systema intelligentiae artificialis fulta nostris stimulis adiuvat ad augendam retis celeritatem et latentiam minuendam. . Lucrum perficiendi systematum repono cum AI Fabrica excitari potest XX% pervenire.
Quid est novus nodi OceanStor Pacific distributus? Solutio factoris 5U comprehendit 120 agitet et tres nodos classicos substituere potest, plus quam spatium duplicatio eculei. Ob recusationem exemplarium copiarum, efficientia impulsuum signanter auget (usque ad 92%).
Solebamur eo quod repositio software definita specialis software in servo classico inauguratus est. Nunc autem, ut meliorem ambitum consequamur, haec architecturae solutio nodos speciales requirit. Constat ex duobus servientibus secundum processores ARM qui aciem trium inch agitatorum administrant.
Ministri hi non satis apti sunt ad solutiones hyperconvervas. Primo, paucae applicationes pro ARM, secundo, difficile est stateram onus ponere. Commutationes ad repositiones separandas suggerimus: botrum computatorium, quod a ministris classicis vel eculeo repraesentatum est, separatim operatur, sed coniungitur cum nodis repono OceanStor Pacifici, qui etiam operas suas directas exercent. Et ipsum iustificat.
Exempli causa, magnas notitias repositionis notitiarum hyperconverged classicas sumamus, quae 15 servo rastellis obtinet. Si onus distribueris inter singulos OceanStor Pacific servitores computandi et nodos repositionis, eas ab invicem separantes, numerus quatit inquisitorum dimidiabitur! Hoc sumptus redigit ad centrum data operandi et summam possessionis summam demittit. In orbe terrarum, ubi notitia rerum conditarum crescit ad 30% per annum, talia beneficia non sunt dispersa.
***
Plura de Huawei solutionibus et applicatione missionum earum, quaeso, nostros visita vel per contingentes procuratores societatis directe.
Source: www.habr.com