{"id":114563,"date":"2024-03-25T18:26:02","date_gmt":"2024-03-25T16:26:02","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov"},"modified":"2024-03-25T18:26:02","modified_gmt":"2024-03-25T16:26:02","slug":"eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov","status":"publish","type":"post","link":"https:\/\/prohoster.info\/it\/blog\/news\/eksperiment-s-ispolzovaniem-sqlite-v-kachestve-kontejnera-dlya-arhivirovaniya-fajlov","title":{"rendered":"Esperimento con l'uso di SQLite come contenitore per l'archiviazione di file","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"
Il progetto Pack ha tentato di creare un formato per l'archiviazione di file basato sulla libreria SQLite e sull'algoritmo di compressione ZSTD (Zstandard). Il prototipo preparato, scritto in linguaggio Pascal e distribuito sotto licenza Apache 2.0, ha superato nella velocit\u00e0 di creazione degli archivi i pi\u00f9 comuni strumenti di archiviazione, dato che il suo funzionamento si limitava alla lettura dei dati, alla compressione tramite la libreria libzstd e all'esecuzione di operazioni SQL per aggiungere i dati compressi al file del database SQLite. <\/p>\n
Durante la compressione di una cartella con 81.000 file, per un totale di 1,25 GB, Pack si \u00e8 rivelato pi\u00f9 veloce dell'utility ZIP di 112 volte, completando l'operazione in 1,3 secondi contro i 146 secondi di ZIP. La dimensione dell'archivio creato da Pack \u00e8 risultata inferiore del 23% (194 MB per Pack e 253 MB per ZIP). A titolo di confronto, l'utility tar ha completato la compressione in 4,7 secondi senza compressione e in 28,5 secondi con compressione gzip, mentre l'archiviatore RAR ha eseguito il test in 27,5 secondi e 7z in 54,2 secondi. Le dimensioni degli archivi sono state: tar.gz \u2014 214 MB, RAR \u2014 235 MB, 7z \u2014 135 MB. Si segnala che Pack supera anche gli altri archivi per velocit\u00e0 di estrazione e accesso casuale ai file, utilizzando meno memoria RAM. ZIP: 253 MB, 146 s 7z: 135 MB, 54,2 s pi\u00f9 veloce di ZIP di 2,7 volte tar.gz: 214 MB, 28,5 s x 5,1 RAR: 235 MB, 27,5 s x 5,3 tar: 1345 MB, 4,7 s x 31 Pack: 194 MB, 1,3 s x 112 <\/p>\n
Non si fa menzione dell'influenza della cache dei file sui risultati del test. Probabilmente, la bassa velocit\u00e0 di ZIP \u00e8 dovuta all'ordine di esecuzione dei test senza considerare la memorizzazione nella cache dei dati in memoria \u2014 il test con zip \u00e8 stato eseguito con la cache fredda, mentre gli altri test sono stati eseguiti con la cache riscaldata. In condizioni normali, Zstandard dimostra una velocit\u00e0 di compressione 3-5 volte superiore rispetto a zlib e una decompressione due volte pi\u00f9 veloce, con un livello di compressione superiore del 10-15%. <\/p>\n
Nota: un'idea simile di memorizzare file compressi come blob in un database SQLite \u00e8 stata implementata nel 2014 nell'archiviatore sqlar, creato dagli sviluppatori di SQLite come esperimento per valutare l'efficacia della memorizzazione dei blob in SQLite. In sqlar viene utilizzato zlib per la compressione e la dimensione dei file \u00e8 circa del 2% maggiore rispetto all'utility ZIP. \n Fonte: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"