{"id":114563,"date":"2024-03-25T18:26:02","date_gmt":"2024-03-25T16:26:02","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov"},"modified":"2024-03-25T18:26:02","modified_gmt":"2024-03-25T16:26:02","slug":"eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov","status":"publish","type":"post","link":"https:\/\/prohoster.info\/da\/blog\/news\/eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov","title":{"rendered":"Eksperiment med at bruge SQLite som beholder til arkivering af filer","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Projekt Pack har fors\u00f8gt at skabe et format til arkivering af filer, baseret p\u00e5 SQLite-biblioteket og ZSTD (Zstandard) komprimeringsalgoritmen. Den forberedte prototype, skrevet i Pascal og distribueret under Apache 2.0 licensen, overgik de mest almindelige arkiveringsprogrammer i hastighed ved at l\u00e6se data, komprimere med libzstd og udf\u00f8re SQL-operationer til at tilf\u00f8je de komprimerede data til en fil med en SQLite-database. <\/p>\n
Ved komprimering af en mappe med 81.000 filer og en samlet st\u00f8rrelse p\u00e5 1,25 GB, viste Pack sig at v\u00e6re 112 gange hurtigere end ZIP, idet det udf\u00f8rte operationen p\u00e5 1,3 sekunder mod 146 sekunder for ZIP. Arkivst\u00f8rrelsen blev desuden 23% mindre med Pack (194 MB med Pack og 253 MB med ZIP). Til sammenligning udf\u00f8rte tar v\u00e6rkt\u00f8jet pakkeringsprocessen p\u00e5 4,7 sekunder uden komprimering og 28,5 sekunder med gzip-komprimering, RAR klarede testen p\u00e5 27,5 sekunder, og 7z tog 54,2 sekunder. Arkivst\u00f8rrelserne var: tar.gz \u2014 214 MB, RAR \u2014 235 MB, 7z \u2014 135 MB. Det bem\u00e6rkes, at Pack ogs\u00e5 overg\u00e5r andre arkiveringsv\u00e6rkt\u00f8jer med hensyn til hastigheden for udpakket og tilf\u00e6ldig adgang til filer, samtidig med at det bruger mindre RAM. ZIP: 253 MB, 146 s 7z: 135 MB, 54,2 s hurtigere end ZIP med 2,7 gange tar.gz: 214 MB, 28,5 s x 5,1 RAR: 235 MB, 27,5 s x 5,3 tar: 1345 MB, 4,7 s x 31 Pack: 194 MB, 1,3 s x 112 <\/p>\n
Der n\u00e6vnes ikke noget om indflydelsen fra filcachen p\u00e5 testresultaterne. Sandsynligvis skyldes den lave hastighed for ZIP r\u00e6kkef\u00f8lgen af testene, uden at tage h\u00f8jde for caching af data i hukommelsen \u2014 testen med ZIP blev udf\u00f8rt med en kold cache, mens de andre tests blev udf\u00f8rt med en varm cache. Under normale forhold viser Zstandard 3-5 gange h\u00f8jere komprimeringshastighed sammenlignet med zlib og en dobbelt s\u00e5 hurtig udpakkning, med en komprimeringsgrad der er 10-15% h\u00f8jere. <\/p>\n
Tilf\u00f8jelse: En lignende id\u00e9 om at gemme komprimerede filer som blobs i SQLite-databasen blev implementeret i 2014 i arkiveringsprogrammet sqlar, skabt af udviklerne af SQLite som et eksperiment for at vurdere effektiviteten af at gemme blobs i SQLite. I sqlar anvendes zlib til kompression, og st\u00f8rrelsen p\u00e5 filerne er cirka 2 % st\u00f8rre end med ZIP-programmet. \n Kilde: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"