{"id":170618,"date":"2026-05-11T18:24:52","date_gmt":"2026-05-11T16:24:53","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/openzl-0-2-0"},"modified":"2026-05-11T18:24:52","modified_gmt":"2026-05-11T16:24:53","slug":"openzl-0-2-0","status":"publish","type":"post","link":"https:\/\/prohoster.info\/et\/blog\/novosti-interneta\/openzl-0-2-0","title":{"rendered":"OpenZL 0.2.0","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"OpenZL <\/a> \"OpenZL <\/a> <\/a><\/noindex> <\/a> <\/p>\n

P\u00e4rast seitsme kuu arendust on v\u00e4lja antud OpenZL raamistik 0.2.0 OpenZL<\/a>, mis on m\u00f5eldud kaotamatute andmekompressorite loomiseks.<\/p>\n

<\/noindex> <\/p>\n

Raamistik koosneb p\u00f5hiteegist ja t\u00f6\u00f6riistadest spetsialiseeritud kompressorite loomiseks, nagu on kirjeldatud keeles SDDL<\/a>.
Hea spetsialiseeritud kompressorite loomine h\u00f5lmab kahte etappi:<\/p>\n

    \n
  1. Andmete anal\u00fc\u00fcs struktuuri v\u00e4ljav\u00f5tmiseks.<\/li>\n
  2. Heade tagaplaneeritud kompressorite kasutamine, mis kasutavad saadud struktuuri hea tihendamise saavutamiseks.<\/li>\n<\/ol>\n

    OpenZL pakub t\u00f6\u00f6riistu m\u00f5lema etapi jaoks.<\/p>\n

    Projekt on kirjutatud keeltes C ja C++ ning seda levitatakse BSD litsentsi alusel.<\/p>\n

    Olulised muudatused<\/h5>\n

    SDDL2<\/strong><\/p>\n

    SDDL on t\u00e4ielikult nullist \u00fcmber kujundatud, et saavutada projekteerimise eesm\u00e4rke. Kui algne demo versioon esindas lihtsustatud jooksukeskkonda, siis SDDL2 – on t\u00e4ie\u00f5iguslik kompilaator: s\u00fcntaksianal\u00fcsaator edastab andmed semantika anal\u00fcsaatorile, see omakorda edastab t\u00fc\u00fcbitud abstraktse s\u00fcntaksipuu (AST) optimeerijale, ning optimeerija juhib koodigeneraatorit, mis genereerib virtuaalmasina baitkoodi.<\/p>\n

    Peamine tulemus on kohene s\u00fcntaksianal\u00fc\u00fcs. Kui kirje asukoht on t\u00e4ielikult m\u00e4\u00e4ratletav ainult parameetrite ja konstantside p\u00f5hjal, suundub mootor otse igale v\u00e4ljale, skaneerimata eelnevaid baite, mis tagab juurdep\u00e4\u00e4su ilma kopeerimiseta ja l\u00e4bilaskev\u00f5imega mitme GB\/s.<\/p>\n

    Keelega on kaasas k\u00e4inud ka t\u00f6\u00f6riistade komplekt. N\u00fc\u00fcd toetab see tingimuslike asukohtade jaoks when-blokke, parameetrilisi ja anon\u00fc\u00fcmseid kirjeid, juurdep\u00e4\u00e4su kirje v\u00e4li liikmetele ning bititaseme ja loogilisi operaatoreid.<\/p>\n

    Arendaja mugavuse osas tuvastab semantika anal\u00fc\u00fcsietapp n\u00fc\u00fcd m\u00e4\u00e4ramatud viidatud, t\u00fc\u00fcbi vastavuse ja arusaadavuse vead kompileerimise etapis – n\u00e4idates asukohta l\u00e4htekoodis – mitte jooksu ajal, samas on v\u00e4lja antud ka VS Code'i laiendus .sddl failide s\u00fcntaktiliseks esilet\u00f5stmiseks.<\/p>\n

    Uus integreeritud LZ koodek<\/strong><\/p>\n

    OpenZL-iga on n\u00fc\u00fcd integreeritud oma LZ-koodik, esindatud ZL_GRAPH_LZ kujul, samuti j\u00e4rjestikune tihendamisprofiil utiliidis zli. Koodiku kallal t\u00f6\u00f6tamine j\u00e4tkub: laienevad funktsioonide komplekt ja j\u00f5udluse paranemine v\u00e4ikeste sisendandmete t\u00f6\u00f6tlemisel. Praeguseks toetab see funktsionaalsust, mis on v\u00f5rdne zstd tasemega 1, tihendamisaken on 64 KB.<\/p>\n

    <\/p>\n

    OpenZL v\u00f5imaldab iga LZ konveieri etapi \u00fcmberkujundamist kiirusel. Selle graafiline arhitektuur v\u00f5imaldab ka kombineerida entropiikoodimise etappe, selle asemel et kasutada \u00fchtset konveierit, mis sobib k\u00f5igi kasutusstsenaariumide jaoks. Seej\u00e4rel v\u00f5ivad mitmed etapid olla koondatud \u00fcheks opsiooniks t\u00f6\u00f6tlemise kiiruse suurendamiseks. See v\u00f5imaldab OpenZL-il saavutada 10% k\u00f5rgemat tihendamise kiirus ja 70% k\u00f5rgemat dekompressimise kiirus v\u00f5rreldes Zstandard tasemega 1 Silesia korpusel. meie testides<\/a>:<\/p>\n

    <\/noindex> <\/p>\n\n\n\n\n\n\n\n
    Tihendaja<\/strong><\/th>\nTihendustase<\/strong><\/th>\nTihendamise kiirus<\/strong><\/th>\nDekompresseerimise kiirus<\/strong><\/th>\n<\/tr>\n<\/thead>\n
    OpenZL LZ tase 1<\/td>\n2.74<\/td>\n466 MB\/s<\/td>\n2288 MB\/s<\/td>\n<\/tr>\n
    Zstd tase 1 64K akna suurusega<\/td>\n2.74<\/td>\n419 MB\/s<\/td>\n1254 MB\/s<\/td>\n<\/tr>\n
    Zstd tase 1<\/td>\n2.89<\/td>\n424 MB\/s<\/td>\n1345 MB\/s<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n

    Toetatakse v\u00e4ga suuri sisendandmeid<\/strong><\/p>\n

    zli toetab n\u00fc\u00fcd suuri sisendandmeid (mitme gigabaidi suuruseid). Enne kokkusurumist jagatakse need andmed n\u00fc\u00fcd automaatselt hallatud suurusega fragmentideks (vaikimisi umbes 16 MB), mis aitab piirata kasutatava m\u00e4lumahu, parandada andmete lokaliseerimist ja avab paralleelse t\u00f6\u00f6tlemise v\u00f5imalused. SDDL2-s on rakendatud sarnane automaatse fragmentimise funktsioon skeemi alusel t\u00f6\u00f6tamisel. Uued segmentaatorid on loodud v\u00f5i uuendatud \u2013 CSV, Parquet ja standardsete numbriliste andmete jaoks \u2013 ning k\u00f5ik segmentaatorid on n\u00fc\u00fcd serialiseeritavad ja kohandatavad, nii et valitud paigutus saab salvestatud olla kompressorisse ja hiljem uuesti kasutada.<\/p>\n

    See rakendatakse sujuvalt tihendamise ajal. Pange t\u00e4hele, et \u00f5ppimiskett erineb ja j\u00e4\u00e4b puutumatuks, seega ei ole see ette n\u00e4htud hiiglaslike sissetulevate andmete vastuv\u00f5tmiseks \u00f5ppematerjalina.<\/p>\n

    Parandused veebigraafiku visualiseerijas (proovida<\/a>)<\/strong>
    N\u00fc\u00fcd tuvastab visualiseerija tihendamise ja lahtipakkimise j\u00e4ljed algusest l\u00f5puni.<\/p>\n

    Voogefikse paneel v\u00f5imaldab vaadata baite, mis tegelikult igas servas l\u00e4bivad, ning l\u00f5ikamise juhtnupud muudavad isegi suured vood mugavaks k\u00e4sitsemiseks.<\/p>\n

    Seadete paneel \u00fchendab k\u00f5ik kuvamise valikud \u00fchte kohta, samas kui t\u00e4iendav klahvikombinatsioonide komplekt \u2013 suunamine, j\u00e4rjestikune l\u00e4bit\u00f6\u00f6tamine, avamine ja kokku t\u00f5mbamine, s\u00f5lmede valimine \u2013 v\u00f5imaldab t\u00f6\u00f6riista mugavalt kasutada ilma hiireta.<\/p>\n

    N\u00fc\u00fcd saavad j\u00e4lgimised versioonid, plokksurutus kuvatakse \u00f5igesti ja zli suudab l\u00f5puks genereerida oma j\u00e4lgimisi uute lipukestega \u2014trace ja \u2014trace-streams-dir.<\/p>\n

    Erinev<\/strong><\/p>\n