{"id":53906,"date":"2019-12-13T00:00:00","date_gmt":"2019-12-12T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/skorostnaya-otkazoustojchivaya-kompressiya-prodolzhenie"},"modified":"2020-02-18T14:01:51","modified_gmt":"2020-02-18T11:01:51","slug":"skorostnaya-otkazoustojchivaya-kompressiya-prodolzhenie","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/skorostnaya-otkazoustojchivaya-kompressiya-prodolzhenie","title":{"rendered":"Hastighetsresistent kompression (Forts.)","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Den h\u00e4r artikeln \u00e4r den andra i serien om snabb datakompression. I den f\u00f6rsta artikeln beskrevs en kompressor som arbetar med en hastighet av 10 GB\/s per processor k\u00e4rna (minimalt komprimering, RTT-Min). <\/p>\n

Denna kompressor har redan implementerats i utrustning f\u00f6r kriminaltekniska dubbletter f\u00f6r snabb komprimering av dumpningar av informationsb\u00e4rare och f\u00f6r att \u00f6ka motst\u00e5ndskraften hos kryptografi. Den kan \u00e4ven anv\u00e4ndas f\u00f6r komprimering av bilder av virtuella maskiner och svappfiler i RAM-minnet n\u00e4r de lagras p\u00e5 h\u00f6gpresterande SSD-enheter.<\/p>\n

I den f\u00f6rsta artikeln tillk\u00e4nnagavs ocks\u00e5 utvecklingen av en komprimeringsalgoritm f\u00f6r att komprimera s\u00e4kerhetskopior av HDD- och SSD-enheter (medelkomprimering, RTT-Mid) med avsev\u00e4rt f\u00f6rb\u00e4ttrade komprimeringsparametrar. F\u00f6r n\u00e4rvarande \u00e4r denna kompressor helt f\u00e4rdig och denna artikel handlar just om den.
\n<\/a><\/noindex>
\nKompressorn som implementerar algoritmen RTT-Mid ger en komprimeringsgrad som \u00e4r j\u00e4mf\u00f6rbar med standardarkivator som WinRar och 7-Zip, som arbetar i snabbhetsl\u00e4ge. Samtidigt \u00e4r dess arbets hastighet minst en ordning h\u00f6gre. <\/p>\n

Hastigheten f\u00f6r packning\/uppackning av data \u00e4r en kritisk parameter som avg\u00f6r anv\u00e4ndningsomr\u00e5det f\u00f6r kompressionsteknologier. Det \u00e4r osannolikt att n\u00e5gon skulle komma p\u00e5 tanken att komprimera en terabyte data med en hastighet av 10-15 Megabyte per sekund (det \u00e4r just denna hastighet hos arkivator i standard komprimeringsl\u00e4ge), eftersom det skulle ta n\u00e4stan tjugo timmar med full processorladdning...<\/p>\n

\u00c5 andra sidan kan samma terabyte kopieras med hastigheter p\u00e5 cirka 2-3 Gigabyte per sekund p\u00e5 tio minuter. <\/p>\n

D\u00e4rf\u00f6r \u00e4r komprimering av stora volymer information relevant om det utf\u00f6rs med en hastighet som inte \u00e4r l\u00e4gre \u00e4n den verkliga in- och utmatningshastigheten. F\u00f6r moderna system \u00e4r detta inte mindre \u00e4n 100 Megabyte per sekund. <\/p>\n

S\u00e5dana hastigheter kan moderna kompressorer endast n\u00e5 i \"fast\"-l\u00e4ge. Det \u00e4r i detta aktuella l\u00e4ge vi kommer att g\u00f6ra en j\u00e4mf\u00f6relse av algoritmen RTT-Mid med traditionella kompressorer.<\/p>\n

J\u00e4mf\u00f6rande testning av den nya komprimeringsalgoritmen<\/h4>\n

\n Kompressorn RTT-Mid fungerade som en del av ett testprogram. I en verklig \"arbets\"-applikation arbetar den betydligt snabbare, d\u00e4r anv\u00e4nds multithreading effektivt och en \"normal\" kompilator, inte C#. <\/p>\n

Eftersom de kompressorer som anv\u00e4ndes i det j\u00e4mf\u00f6rande testet baseras p\u00e5 olika principer och olika typer av data komprimeras p\u00e5 olika s\u00e4tt, anv\u00e4ndes metoden att m\u00e4ta 'den genomsnittliga temperaturen p\u00e5 sjukhuset' f\u00f6r att s\u00e4kerst\u00e4lla objektivitet i testet\u2026<\/p>\n

En fil med sektordump av den logiska disken med operativsystemet Windows 10 skapades, vilket utg\u00f6r en naturlig blandning av olika datastrukturer som faktiskt finns p\u00e5 varje dator. Komprimering av denna fil m\u00f6jligg\u00f6r en j\u00e4mf\u00f6relse av hastighet och kompressionsgrad f\u00f6r den nya algoritmen med de mest avancerade kompressorerna som anv\u00e4nds i moderna arkiverare.<\/p>\n

H\u00e4r \u00e4r dumpfilen:<\/p>\n

\"Hastighetsresistent
\n
\nDumpfilen komprimerades av kompressorerna RTT-Mid, 7-zip, WinRar. Kompressorerna WinRar och 7-zip st\u00e4lldes in p\u00e5 maximal arbetskapacitet.<\/p>\n

Kompressorn arbetar 7-zip<\/b>:<\/p>\n

\"Hastighetsresistent
\n
\nDen belastar processorn till 100%, med en genomsnittlig l\u00e4shastighet av den ursprungliga dumpen p\u00e5 cirka 60 Megabyte\/s.<\/p>\n

Kompressorn arbetar WinRar<\/b>:<\/p>\n

\"Hastighetsresistent
\n
\nSituationen \u00e4r liknande, processorbelastningen \u00e4r n\u00e4stan 100%, med en genomsnittlig l\u00e4shastighet av dumpen p\u00e5 cirka 125 Megabyte\/s.<\/p>\n

Som i det f\u00f6reg\u00e5ende fallet begr\u00e4nsas arkiverarens hastighet av processorens kapacitet.<\/p>\n

Nu k\u00f6rs testprogrammet f\u00f6r kompressorn RTT-Mid<\/b>:<\/p>\n

\"Hastighetsresistent
\n
\nSk\u00e4rmdumpen visar att processorn \u00e4r belastad till 50% och \u00e4r inaktiv resten av tiden, eftersom det inte finns n\u00e5got st\u00e4lle att skriva ut de komprimerade data. Utdataklusteret (Disk 0) \u00e4r n\u00e4stan helt fullt. Hastigheten f\u00f6r datal\u00e4sning (Disk 1) fluktuerar kraftigt, men ligger i genomsnitt \u00f6ver 200 Megabyte\/s.<\/p>\n

I det h\u00e4r fallet begr\u00e4nsas kompressorens hastighet av m\u00f6jligheten att skriva de komprimerade data p\u00e5 Disk 0.<\/p>\n

Nu ser vi graden av komprimering av de resulterande arkiven:<\/p>\n

\"Hastighetsresistent
\n
\n\"Hastighetsresistent
\n
\n\"Hastighetsresistent
\n
\nDet \u00e4r tydligt att kompressorn RTT-Mid var b\u00e4st p\u00e5 komprimering; arkivet skapat av den \u00e4r 1,3 Gigabyte mindre \u00e4n arkivet fr\u00e5n WinRar och 2,1 Gigabyte mindre \u00e4n arkivet fr\u00e5n 7z.<\/p>\n

Tiden som lagts ned p\u00e5 att skapa arkivet:<\/p>\n