🥇 फाइलहरू संग्रह गर्न कन्टेनरको रूपमा SQLite प्रयोग गर्ने एउटा प्रयोग

प्याक परियोजनाले SQLite लाइब्रेरी र ZSTD (Zstandard) कम्प्रेसन एल्गोरिथ्ममा आधारित फाइल संग्रह ढाँचा सिर्जना गर्ने प्रयास गर्यो। तयार प्रोटोटाइप, Pascal मा लेखिएको र Apache 2.0 इजाजतपत्र अन्तर्गत वितरित, अभिलेखहरू सिर्जना गर्ने गतिमा सबैभन्दा सामान्य अभिलेखहरू भन्दा राम्रो प्रदर्शन गर्‍यो, यसको काम डाटा पढ्ने, यसलाई libzstd पुस्तकालयसँग कम्प्रेस गर्ने र SQL कार्यहरू प्रदर्शन गर्नमा सीमित थियो भन्ने तथ्यको बावजुद। डाटाबेस SQLite सँग फाइलमा संकुचित डाटा थप्नुहोस्।

81 GB को कुल साइजको 1.25 हजार फाइलहरूसँग डाइरेक्टरी कम्प्रेस गर्दा, प्याक जिप उपयोगिताको तुलनामा 112 गुणा छिटो थियो, जिपको लागि 1.3 सेकेन्डको तुलनामा 146 सेकेन्डमा सञ्चालन पूरा भयो। प्याकको अभिलेख आकार २३% सानो थियो (प्याकका लागि १९४ एमबी र ZIPका लागि २५३ एमबी)। तुलनाको लागि, टार युटिलिटीले कम्प्रेसन बिना 23 सेकेन्डमा प्याकेजिङ पूरा गर्यो र gzip कम्प्रेसनको साथ 194 सेकेन्डमा, RAR आर्काइभरले 253 सेकेन्डमा र 4.7z 28.5 सेकेन्डमा परीक्षण पूरा गर्यो। अभिलेख आकारहरू थिए: tar.gz - 27.5 MB, RAR - 7 MB, 54.2z - 214 MB। यो नोट गरिएको छ कि अनप्याक गर्ने गति र फाइलहरूमा अनियमित पहुँचको सन्दर्भमा, प्याक अन्य अभिलेखकर्ताहरू भन्दा अगाडि छ, जबकि कम RAM खपत गर्दछ। ZIP: 235 MB, 7 s 135z: 253 MB, 146 s छिटो ZIP 7 गुणा tar.gz: 135 MB, 54.2 sx 2.7 RAR: 214 MB, 28.5 sx 5.1 tar: 235 MB, Pa27.5 MB, Pa5.3 MB SX 1345

परीक्षण परिणामहरूमा फाइल क्यासको प्रभावको कुनै उल्लेख छैन। सम्भवतः, जिपको कम गति मेमोरीमा डाटा क्यासिङलाई ध्यान नदिई परीक्षणहरू सुरु गरिएको आदेशको कारणले हो - जिपको साथ परीक्षण चिसो क्यासको साथ सुरु गरिएको थियो, र बाँकी परीक्षणहरू न्यानो क्यासको साथ। सामान्य अवस्थामा, Zstandard ले 3-5% उच्च कम्प्रेसन स्तरहरू सहित, zlib भन्दा 10-15 गुणा छिटो कम्प्रेसन गति र XNUMX गुणा छिटो डिकम्प्रेसन प्रदर्शन गर्दछ।

थप: SQLite डाटाबेसमा ब्लबको रूपमा कम्प्रेस गरिएका फाइलहरू भण्डारण गर्ने समान विचार 2014 मा sqlar archiver मा लागू गरिएको थियो, SQLite विकासकर्ताहरू द्वारा SQLite मा ब्लबहरू भण्डारण गर्ने क्षमताको मूल्याङ्कन गर्न प्रयोगको रूपमा सिर्जना गरिएको थियो। sqlar ले कम्प्रेसनको लागि zlib प्रयोग गर्दछ र फाइल आकार ZIP उपयोगिता भन्दा लगभग 2% ठूलो छ।

स्रोत: opennet.ru

फाइलहरू संग्रह गर्न कन्टेनरको रूपमा SQLite प्रयोग गरी प्रयोग गर्नुहोस्

एक टिप्पणी थप्न Отменить ответ