4.2.2. RBER kaj disko-aĝo (ekskludante PE-ciklojn).
Figuro 1 montras signifan korelacion inter RBER kaj aĝo, kio estas la nombro da monatoj, kiujn la disko estis en la kampo. Tamen, ĉi tio povas esti falsa korelacio ĉar estas verŝajne ke pli malnovaj veturadoj havas pli da PEoj kaj tial RBER estas pli korelaciita kun PE-cikloj.
Por forigi la efikon de aĝo sur eluziĝo kaŭzita de PE-cikloj, ni grupigis ĉiujn monatojn da servo en ujojn uzante la decilojn de la PE-ciklodistribuo kiel detranĉo inter ujoj, ekzemple, la unua ujo enhavas ĉiujn monatojn da diskovivo ĝis la unua decilo de la PE-ciklodistribuo, kaj tiel plu. Ni kontrolis, ke ene de ĉiu ujo la korelacio inter PE-cikloj kaj RBER estas sufiĉe malgranda (ĉar ĉiu ujo nur kovras malgrandan gamon da PE-cikloj), kaj poste kalkulis la korelacian koeficienton inter RBER kaj disko-aĝo aparte por ĉiu ujo.
Ni faris ĉi tiun analizon aparte por ĉiu modelo ĉar iuj observitaj korelacioj ne ŝuldiĝas al diferencoj inter la pli junaj kaj pli malnovaj modeloj, sed nur pro la aĝo de la diskoj de la sama modelo. Ni observis, ke eĉ post limigado de la efiko de PE-cikloj en la maniero priskribita supre, por ĉiuj veturmodeloj ankoraŭ estis signifa korelacio inter la nombro da monatoj, kiam veturado estis sur la kampo kaj ĝia RBER (koeficientoj de korelacio variis de 0,2 ĝis 0,4). ).
Rizo. 3. La rilato inter RBER kaj la nombro da PE-cikloj por novaj kaj malnovaj diskoj montras, ke la aĝo de la disko influas la RBER-valoron sendepende de la PE-cikloj kaŭzitaj de eluziĝo.
Ni ankaŭ grafike bildigis la efikon de veturado-aĝo dividante la tagojn de uzo de la veturado en "juna" aĝo ĝis 1 jaro kaj la tagojn de uzo de la veturado dum la aĝo de 4 jaroj, kaj poste punktskribis la RBER de ĉiu. grupo kontraŭ la nombro da PE-cikloj. Figuro 3 montras ĉi tiujn rezultojn por la modelo de stirado MLC-D. Ni vidas rimarkindan diferencon en RBER-valoroj inter la grupoj de malnovaj kaj novaj diskoj tra ĉiuj PE-cikloj.
El tio, ni konkludas, ke aĝo, mezurita per tagoj da disko-uzo en la kampo, havas signifan efikon al RBER, sendepende de memorĉela eluziĝo pro eksponiĝo al PE-cikloj. Ĉi tio signifas, ke aliaj faktoroj, kiel silicio-maljuniĝo, ludas grandan rolon en la fizika eluziĝo de la disko.
4.2.3. RBER kaj laborkvanto.
Biteraroj supozeble estas kaŭzitaj de unu el kvar mekanismoj:
- konservado-eraroj Retenaj eraroj, kiam memorĉelo perdas datumojn kun la tempo
Legi perturbi erarojn, en kiuj legado difektas la enhavon de apuda ĉelo; - Skribu perturbi erarojn, en kiuj legado difektas la enhavon de apuda ĉelo;
- Nekompletaj viŝaj eraroj, kiam la viŝa operacio ne tute forigas la enhavon de la ĉelo.
Eraroj de la lastaj tri tipoj (legi perturbi, skribi perturbi, nekompleta forviŝo) estas korelaciitaj kun laborkvanto, do kompreni la korelacion inter RBER kaj laborkvanto helpas nin kompreni la tropezon de malsamaj erarmekanismoj. En lastatempa studo, "A largescale study of flash memory failures in the field" (MEZA, J., WU, Q., KUMAR, S., MUTLU, O. "A largescale study of flashmemor failures in the field" (MEZA, J., WU, Q., KUMAR, S., MUTLU, O.) "A largescale study of flash memory failures in la kampo." En Proceedings of the 2015 ACM SIGMETRICS Internacia Konferenco sur Measurement and Modeling of Computer Systems, New York, 2015, SIGMETRICS '15, ACM, pp. 177-190) finis ke stokaderaroj dominas en la kampo, dum Reading-eraroj. estas sufiĉe negravaj.
Figuro 1 montras signifan rilaton inter la RBER-valoro en antaŭfiksita monato da diskovivo kaj la nombro da legado, skribado kaj forigo en la sama monato por iuj modeloj (ekzemple, la korelacia koeficiento estas pli alta ol 0,2 por la MLC - B). modelo kaj pli alta ol 0,6 por la SLC-B). Tamen, eblas, ke ĉi tio estas falsa korelacio, ĉar monata laborkvanto povas esti rilatita al la tuta nombro de PE-cikloj.
Ni uzis la saman metodaron priskribitan en Sekcio 4.2.2 por izoli la efikojn de laborŝarĝo de la efikoj de PE-cikloj izolante monatojn da veturadoperacio surbaze de antaŭaj PE-cikloj, kaj poste determinante korelaciajn koeficientojn aparte por ĉiu ujo.
Ni vidis, ke la korelacio inter la nombro da legoj en difinita monato da diskovivo kaj la RBER-valoro en tiu monato daŭris por la MLC-B kaj SLC-B-modeloj, eĉ kiam limigante PE-ciklojn. Ni ankaŭ ripetis similan analizon, kie ni ekskludis la efikon de legado sur la nombro da samtempaj skriboj kaj forigadoj, kaj konkludis, ke la korelacio inter RBER kaj la nombro da legado validas por la SLC-B-modelo.
Figuro 1 ankaŭ montras la korelacion inter RBER kaj skribi kaj forviŝi operaciojn, do ni ripetis la saman analizon por legi, skribi kaj forviŝi operaciojn. Ni konkludas, ke limigante la efikon de PE-cikloj kaj legado, ne ekzistas rilato inter la RBER-valoro kaj la nombro da skriboj kaj forigadoj.
Tiel, ekzistas disko-modeloj, kie legaj malobservaj eraroj havas signifan efikon al RBER. Aliflanke, ekzistas neniu indico ke RBER estas trafita per skribmalobservaj eraroj kaj nekompletaj forviŝeraroj.
4.2.4 RBER kaj litografio.
Diferencoj en objektograndeco povas parte klarigi la diferencojn en RBER-valoroj inter stiraj modeloj uzantaj la saman teknologion, t.e. MLC aŭ SLC. (Vidu Tabelon 1 por superrigardo de la litografio de la diversaj modeloj inkluzivitaj en ĉi tiu studo).
Ekzemple, 2 SLC-modeloj kun 34nm litografio (modeloj SLC-A kaj SLC-D) havas RBER kiu estas grandordo pli alta ol tiu de 2 modeloj kun 50nm mikroelektronika litografio (modeloj SLC-B kaj SLC-C). Koncerne MLC-modelojn, nur la 43nm-modelo (MLC-B) havas mezan RBER, kiu estas 50% pli alta ol la aliaj 3 modeloj kun 50nm-litografio. Plie, ĉi tiu diferenco en RBER pliiĝas je faktoro de 4 kiam la diskoj eluziĝas, kiel montrite en Figuro 2. Fine, pli maldika litografio povas klarigi la pli altan RBER de eMLC-diskoj kompare kun MLC-diskoj. Ĝenerale, ni havas klarajn evidentecojn, ke litografio influas RBER.
4.2.5. Ĉeesto de aliaj eraroj.
Ni esploris la rilaton inter RBER kaj aliaj specoj de eraroj, kiel ekzemple nekorekteblaj eraroj, timeout-eraroj, ktp., precipe, ĉu la RBER-valoro iĝas pli alta post monato da ekspozicio al aliaj specoj de eraroj.
Figuro 1 montras, ke dum la RBER de la antaŭa monato prognozas estontajn RBER-valorojn (koeficiento de korelacio pli granda ol 0,8), ne ekzistas grava korelacio inter nekorekteblaj eraroj kaj RBER (plej dekstra grupo de eroj en Figuro 1). Por aliaj specoj de eraroj, la korelacia koeficiento estas eĉ pli malalta (ne montrita en la figuro). Ni plue esploris la rilaton inter RBER kaj nekorekteblaj eraroj en Sekcio 5.2 de ĉi tiu artikolo.
4.2.6. Influo de aliaj faktoroj.
Ni trovis evidentecon, ke ekzistas faktoroj, kiuj havas gravan efikon sur RBER, pri kiuj niaj datumoj ne povus respondeci. Aparte, ni rimarkis, ke la RBER por donita diskmodelo varias depende de la areto en kiu la disko estas deplojita. Bona ekzemplo estas Figuro 4, kiu montras RBER kiel funkcion de PE-cikloj por MLC-D veturadoj en tri malsamaj aretoj (strekitaj linioj) kaj komparas ĝin kun RBER por ĉi tiu modelo relative al la tutsumo de veturadoj (solidlinio). Ni trovas, ke ĉi tiuj diferencoj daŭras eĉ kiam ni limigas la influon de faktoroj kiel disko-aĝo aŭ nombro da legoj.
Unu ebla klarigo por tio estas diferencoj en laborkvanto-speco trans aretoj, ĉar ni observas ke aretoj kies laborkvantoj havas la plej altajn legado-/skribajn proporciojn havas la plej altan RBER.
Rizo. 4 a), b). Mezaj RBER-valoroj kiel funkcio de PE-cikloj por tri malsamaj aretoj kaj dependeco de la legado/skriba rilatumo de la nombro da PE-cikloj por tri malsamaj aretoj.
Ekzemple, Figuro 4 (b) montras la legadon/skribajn proporciojn de malsamaj aretoj por la MLC-D-veturmodelo. Tamen, la legado/skriba rilatumo ne klarigas la diferencojn inter aretoj por ĉiuj modeloj, do povas ekzisti aliaj faktoroj, kiujn niaj datumoj ne konsideras, kiel mediaj faktoroj aŭ aliaj eksteraj laborŝarĝaj parametroj.
4.3. RBER dum akcelita fortikectestado.
La plej multaj sciencaj laboroj, same kiel provoj faritaj aĉetante amaskomunikilaron sur industria skalo, antaŭdiras la fidindecon de aparatoj sur la kampo surbaze de la rezultoj de akcelitaj fortikectestoj. Ni decidis eltrovi kiom bone la rezultoj de tiaj provoj respondas al praktika sperto pri funkciado de solidsubstancaj stokaj rimedoj.
Analizo de testrezultoj faritaj uzante la ĝeneralan akcelitan testmetodaron por ekipaĵoj provizitaj al datumcentroj de Google montris, ke kampaj RBER-valoroj estas signife pli altaj ol antaŭvidite. Ekzemple, por la modelo eMLC-a, la meza RBER por diskoj operaciitaj en la kampo (fine de testado la nombro da PE-cikloj atingis 600) estis 1e-05, dum laŭ la rezultoj de prepara akcelita testado, ĉi tiu RBER. valoro devus respondi al pli ol 4000 PE-cikloj. Ĉi tio indikas, ke estas tre malfacile antaŭdiri la RBER-valoron en la kampo surbaze de RBER-taksoj akiritaj de laboratoriotestoj.
Ni ankaŭ rimarkis, ke iuj specoj de eraroj estas sufiĉe malfacile reprodukteblaj dum akcelita testado. Ekzemple, en la kazo de la modelo MLC-B, preskaŭ 60% de diskoj sur la kampo spertas nekorekteblajn erarojn kaj preskaŭ 80% de diskoj disvolvas malbonajn blokojn. Tamen, dum akcelita eltenivotestado, neniu el la ses aparatoj travivis iujn ajn nekorekteblajn erarojn ĝis la veturadoj atingis pli ol tri fojojn la PE-ciklolimon. Por eMLC-modeloj, nekorekteblaj eraroj okazis en pli ol 80% de diskoj en la kampo, dum dum akcelita testado tiaj eraroj okazis post atingado de 15000 PE-cikloj.
Ni ankaŭ rigardis la RBER raportitan en antaŭa esplorlaboro, kiu baziĝis sur eksperimentoj en kontrolita medio, kaj konkludis, ke la gamo de valoroj estis ekstreme larĝa. Ekzemple, L.M. Grupp kaj aliaj en sia laboro 2009 -2012 raportas RBER-valorojn por veturadoj, kiuj estas proksime atingi PE-ciklolimojn. Ekzemple, por SLC kaj MLC-aparatoj kun litografiograndecoj similaj al tiuj uzitaj en nia laboro (25-50nm), la RBER-valoro varias de 1e-08 ĝis 1e-03, kun la plej multaj veturmodeloj testitaj havante RBER-valoron proksime al 1e- 06.
En nia studo, la tri veturmodeloj, kiuj atingis la PE-ciklan limon, havis RBERojn de 3e-08 ĝis 8e-08. Eĉ konsiderante, ke niaj nombroj estas pli malaltaj limoj kaj povus esti 16-oble pli grandaj en la plej malbona kazo, aŭ konsiderante la 95-an procenton de RBER, niaj valoroj ankoraŭ estas signife pli malaltaj.
Ĝenerale, dum realaj kampaj RBER-valoroj estas pli altaj ol antaŭviditaj valoroj bazitaj sur akcelita fortikectestado, ili ankoraŭ estas pli malaltaj ol la plej multaj RBER-oj por similaj aparatoj raportitaj en aliaj esploraj artikoloj kaj kalkulitaj el laboratoriaj testoj. Ĉi tio signifas, ke vi ne devus fidi je antaŭviditaj kampaj RBER-valoroj, kiuj estis derivitaj de akcelita fortikectestado.
5. Nekorekteblaj eraroj.
Konsiderante la disvastigitan aperon de nekorekteblaj eraroj (UE), kiuj estis diskutitaj en Sekcio 3 de ĉi tiu artikolo, en ĉi tiu sekcio ni esploras iliajn karakterizaĵojn pli detale. Ni komencas diskutante kiun metrikon uzi por mezuri UE, kiel ĝi rilatas al RBER, kaj kiel UE estas trafita de diversaj faktoroj.
5.1. Kial la UBER-proporcio ne havas sencon.
La norma metriko karakterizanta nekorekteblajn erarojn estas la UBER nekorektebla bita erarofteco, t.e. la rilatumo de la nombro da nekorekteblaj bita eraroj al la tutsumo de bitoj legitaj.
Tiu metriko implicite supozas ke la nombro da nekorekteblaj eraroj estas iel ligita al la nombro da bitoj legitaj, kaj tial devas esti normaligita per tiu nombro.
Tiu supozo validas por korekteblaj eraroj, kie la nombro da eraroj observitaj en antaŭfiksita monato estas trovita esti altagrade korelaciita kun la nombro da legadoj dum la sama tempodaŭro (Spearman-korelaciokoeficiento pli granda ol 0.9). La kialo de tia forta korelacio estas, ke eĉ unu malbona bito, kondiĉe ke ĝi estas korektebla uzante ECC, daŭre pliigos la nombron da eraroj kun ĉiu legoperacio alirita de ĝi, ĉar la taksado de la ĉelo enhavanta la malbonan biton estas. ne tuj korektita kiam eraro estas detektita (diskoj nur periode reverkas paĝojn kun difektitaj bitoj).
La sama supozo ne validas por nekorekteblaj eraroj. Nekorektebla eraro malhelpas pluan uzon de la difektita bloko, do post kiam detektita, tia bloko ne influos la nombron da eraroj en la estonteco.
Por formale konfirmi ĉi tiun supozon, ni uzis diversajn metrikojn por mezuri la rilaton inter la nombro da legoj en antaŭfiksita monato da diskovivo kaj la nombro da nekorekteblaj eraroj dum la sama tempodaŭro, inkluzive de diversaj korelaciaj koeficientoj (Pearson, Spearman, Kendall) , same kiel vida inspektado de grafeoj . Aldone al la nombro da nekorekteblaj eraroj, ni ankaŭ rigardis la oftecon de nekorekteblaj eraroj (t.e., la probableco ke disko havos almenaŭ unu tian okazaĵon dum antaŭfiksita tempodaŭro) kaj ilian rilaton al legado de operacioj.
Ni trovis neniujn pruvojn pri korelacio inter la nombro da legoj kaj la nombro da nekorekteblaj eraroj. Por ĉiuj veturmodeloj, la korelaciaj koeficientoj estis sub 0.02, kaj la grafikaĵoj ne montris ajnan pliiĝon en UE kiam la nombro da legoj pliiĝis.
En Sekcio 5.4 de ĉi tiu artikolo, ni diskutas, ke skribi kaj forviŝi operaciojn ankaŭ havas neniun rilaton al nekorekteblaj eraroj, do la alternativa difino de UBER, kiu estas normaligita per skribaj aŭ viŝi operacioj anstataŭ legi operacioj, havas neniun signifon.
Ni do konkludas, ke UBER ne estas signifa metriko, krom eble kiam oni provas en kontrolitaj medioj, kie la nombro da legoj estas fiksita de la eksperimentisto. Se UBER estas utiligita kiel metriko dum kamptestado, ĝi artefarite malaltigos la erarprocenton por veturadoj kun alta legokalkulo kaj artefarite ŝveligos la erarprocenton por veturadoj kun malalta legado-nombrado, ĉar nekorekteblaj eraroj okazas nekonsiderante la nombro da legadoj.
5.2. Nekorekteblaj eraroj kaj RBER.
La graveco de RBER estas klarigita per la fakto, ke ĝi funkcias kiel mezuro por determini la totalan fidindecon de la stirado, precipe surbaze de la verŝajneco de nekorekteblaj eraroj. En ilia laboro, N. Mielke et al en 2008 estis la unuaj se temas pri proponi difini la atendatan nekorekteblan eraroprocenton kiel funkcion de RBER. Ekde tiam, multaj sistemprogramistoj uzis similajn metodojn, kiel ekzemple taksado de la atendata nekorektebla erarofteco kiel funkcio de RBER kaj ECC-speco.
La celo de ĉi tiu sekcio estas karakterizi kiom bone RBER antaŭdiras nekorekteblajn erarojn. Ni komencu per Figuro 5a, kiu prezentas la mezan RBER por kelkaj unuageneraciaj veturmodeloj kontraŭ la procento de tagoj, kiam ili estis uzataj, kiuj spertis nekorekteblajn UE-erarojn. Oni devas rimarki, ke iuj el la 16 modeloj montritaj en la grafikaĵo ne estas inkluzivitaj en Tabelo 1 pro manko de analizaj informoj.
Rizo. 5a. Rilato inter meza RBER kaj nekorekteblaj eraroj por diversaj veturmodeloj.
Rizo. 5b. Rilato inter meza RBER kaj nekorekteblaj eraroj por malsamaj diskoj de la sama modelo.
Memoru ke ĉiuj modeloj ene de la sama generacio uzas la saman ECC-mekanismon, do diferencoj inter modeloj estas sendependaj de ECC-diferencoj. Ni vidis neniun korelacion inter RBER kaj UE-okazaĵoj. Ni kreis la saman intrigon por la 95-a procento RBER kontraŭ UE-probablo kaj denove vidis neniun korelacion.
Poste, ni ripetis la analizon ĉe granula nivelo por individuaj diskoj, t.e., ni provis ekscii ĉu ekzistas diskoj, kie pli alta RBER-valoro respondas al pli alta UE-frekvenco. Ekzemple, Figuro 5b prezentas la mezan RBER por ĉiu veturado de la MLC-c-modelo kontraŭ la nombro da UEoj (rezultoj similaj al tiuj akiritaj por la 95-a percentila RBER). Denove, ni ne vidis ajnan korelacion inter RBER kaj UE.
Fine, ni faris pli precizan tempan analizon por ekzameni ĉu la funkciigaj monatoj de diskoj kun pli alta RBER respondus al la monatoj dum kiuj UEoj okazis. Figuro 1 jam indikis, ke la korelacia koeficiento inter nekorekteblaj eraroj kaj RBER estas tre malalta. Ni ankaŭ eksperimentis kun malsamaj manieroj desegni la probablecon de UE kiel funkcio de RBER kaj trovis neniujn signojn de korelacio.
Tiel, ni konkludas, ke RBER estas nefidinda metriko por antaŭdiri UE. Tio povas signifi ke la fiaskomekanismoj kiuj kondukas al RBER estas diferencaj de la mekanismoj kiuj kondukas al nekorekteblaj eraroj (ekz., eraroj enhavitaj en individuaj ĉeloj kontraŭ pli grandaj problemoj okazantaj kun la tuta aparato).
5.3. Nekorekteblaj eraroj kaj eluziĝo.
Ĉar eluziĝo estas unu el la ĉefaj problemoj de fulmmemoro, Figuro 6 montras la ĉiutagan probablecon de nekorekteblaj eraroj de stirado kiel funkcio de PE-cikloj.
Figuro 6. Ĉiutaga probablo de okazo de nekorekteblaj eraroj de stirado depende de PE-cikloj.
Ni rimarkas, ke la probablo de UE pliiĝas senĉese kun la aĝo de la stirado. Tamen, kiel kun RBER, la pliiĝo estas pli malrapida ol kutime supozita: la grafeoj montras ke UEoj kreskas linie prefere ol eksponente kun PE-cikloj.
Du konkludoj, kiujn ni faris por RBER, validas ankaŭ por UEoj: unue, ekzistas neniu klara pliiĝo en erarpotencialo post kiam la PE-ciklolimo estas atingita, kiel ekzemple en Figuro 6 por la MLC-D-modelo kies PE-ciklolimo estas 3000. Due, Due , la erarofteco varias inter malsamaj modeloj, eĉ ene de la sama klaso. Tamen, ĉi tiuj diferencoj ne estas tiel grandaj kiel por RBER.
Fine, por subteni niajn trovojn en Sekcio 5.2, ni trovis, ke ene de ununura modelklaso (MLC kontraŭ SLC), la modeloj kun la plej malaltaj RBER-valoroj por donita nombro da PE-cikloj ne estas nepre tiuj kun la plej malaltaj. probablo de UE-apero. Ekzemple, pli ol 3000 PE-cikloj, MLC-D-modeloj havis RBER-valorojn 4 fojojn pli malaltajn ol MLC-B-modeloj, sed la UE-probablo por la sama nombro da PE-cikloj estis iomete pli alta por MLC-D-modeloj ol por MLC-B. modeloj.
Figuro 7. Monata probablo de apero de nekorekteblaj eraroj de stirado kiel funkcio de la ĉeesto de antaŭaj eraroj de diversaj tipoj.
5.4. Nekorekteblaj eraroj kaj laborkvanto.
Pro la samaj kialoj, ke laborkvanto povas influi RBER (vidu Sekcion 4.2.3), ĝi povas esti atendita ankaŭ influi la UE. Ekzemple, ĉar ni observis, ke legaj malobservaj eraroj influas RBER, legaj operacioj ankaŭ povas pliigi la verŝajnecon de nekorekteblaj eraroj.
Ni faris detalan studon pri la efiko de laborŝarĝo sur la UE. Tamen, kiel notite en Sekcio 5.1, ni ne trovis rilaton inter UE kaj la nombro da legoj. Ni ripetis la saman analizon por skribi kaj forviŝi operaciojn kaj denove vidis neniun korelacion.
Notu, ke unuavide, ĉi tio ŝajnas kontraŭdiri nian antaŭan observon, ke nekorekteblaj eraroj estas korelaciitaj kun PE-cikloj. Sekve, oni povus bone atendi korelacion kun la nombro da skriba kaj forviŝ-operacioj.
Tamen, en nia analizo de la efiko de PE-cikloj, ni komparis la nombron da nekorekteblaj eraroj en difinita monato kun la totala nombro da PE-cikloj, kiujn la stirado spertis dum sia ĝisnuna vivo, por mezuri la efikon de eluziĝo. Studante la efikon de laborkvanto, ni rigardis la monatojn da veturadoperacio, kiuj havis la plej altan nombron da legado/skribado/forigita operacioj en aparta monato, kiuj ankaŭ havis pli altan ŝancon kaŭzi nekorekteblajn erarojn, t.e., ni ne enkalkulis. kalkuli la totalan nombron de operacioj de legado/skribado/viŝado.
Kiel rezulto, ni venis al la konkludo, ke legi malobservajn erarojn, skribajn malobservajn erarojn kaj nekompletajn forviŝajn erarojn ne estas la ĉefaj faktoroj en la disvolviĝo de nekorekteblaj eraroj.
Dankon pro restado ĉe ni. Ĉu vi ŝatas niajn artikolojn? Ĉu vi volas vidi pli interesan enhavon? Subtenu nin farante mendon aŭ rekomendante al amikoj, 30% rabato por uzantoj de Habr sur unika analogo de enirnivelaj serviloj, kiu estis inventita de ni por vi: (havebla kun RAID1 kaj RAID10, ĝis 24 kernoj kaj ĝis 40GB DDR4).
Dell R730xd 2 fojojn pli malmultekosta? Nur ĉi tie en Nederlando! Dell R420 - 2x E5-2430 2.2Ghz 6C 128GB DDR3 2x960GB SSD 1Gbps 100TB - ekde $99! Legu pri
fonto: www.habr.com