{"id":144566,"date":"2025-10-09T17:11:54","date_gmt":"2025-10-09T15:11:56","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/sistema-szhatiya-openzl-operezhayushhaya-zstd-i-xz-po-skorosti-i-urovnyu-szhatiya-strukturirovannyh-dannyh"},"modified":"2025-10-09T17:11:54","modified_gmt":"2025-10-09T15:11:56","slug":"sistema-szhatiya-openzl-operezhayushhaya-zstd-i-xz-po-skorosti-i-urovnyu-szhatiya-strukturirovannyh-dannyh","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/news\/sistema-szhatiya-openzl-operezhayushhaya-zstd-i-xz-po-skorosti-i-urovnyu-szhatiya-strukturirovannyh-dannyh","title":{"rendered":"Das OpenZL-Kompressionssystem \u00fcbertrifft Zstd und XZ sowohl in der Geschwindigkeit als auch im Kompressionsgrad strukturierten Daten.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Das Unternehmen Meta* hat ein Werkzeug zur Komprimierung und Dekomprimierung von Daten namens OpenZL vorgestellt, das im Vergleich zu den Formaten Zstd und XZ eine h\u00f6here Kompressionsrate und Arbeitsgeschwindigkeit aufweist. OpenZL wurde f\u00fcr die effiziente Kompression strukturierter Datens\u00e4tze entwickelt, die beispielsweise im maschinellen Lernen verwendet werden, sowie f\u00fcr Speicher, die Felder mit verschiedenen wiederkehrenden Informationstypen enthalten. Der Code von OpenZL ist in C\/C++ geschrieben und unter der BSD-Lizenz verf\u00fcgbar. <\/p>\n

Beim Komprimieren einer Datenbank mit dem astronomischen Sterne-Katalog SAO erm\u00f6glichte das OpenZL-Toolkit eine Verringerung der Datengr\u00f6\u00dfe um das 2,06-fache, w\u00e4hrend der zstd-Algorithmus die Informationen um das 1,31-fache komprimierte und XZ um das 1,64-fache. Dabei \u00fcbertraf OpenZL zstd in der Komprimierungsgeschwindigkeit um das Zweifache (203 MB\/s gegen\u00fcber 115 MB\/s) und XZ um das 65-fache (203 MB\/s gegen\u00fcber 3,1 MB\/s). Die Dekompression in OpenZL war nur geringf\u00fcgig langsamer als bei zstd (822 MB\/s gegen\u00fcber 890 MB\/s) und 27-mal schneller als bei XZ.

\"Das<\/center> <\/p>\n

OpenZL ist kein Algorithmus f\u00fcr allgemeine Zwecke und zeigt nur bei Daten mit zuvor bekannter Struktur gute Ergebnisse. Die Funktionsweise von OpenZL besteht darin, einen adaptiven Kompressor basierend auf der \u00fcbermittelten Datenbeschreibung zu generieren. Dadurch wird Code zur Kompression erstellt, der f\u00fcr das spezifische Datenformat optimiert ist. F\u00fcr die Dekompression wird ein universeller Dekompressor verwendet, der mit allen generierten Kompressoren kompatibel ist. <\/p>\n

Die Verpackung und Dekompression erfolgt mit einem einzigen Tool namens \u201ezli\u201c oder der Bibliothek libopenzl. Die Datenstruktur wird in Form von Profilen beschrieben. Das Paket enth\u00e4lt bereits eine Reihe vordefinierter Profile, die typische Speicherformate beschreiben. Beispielsweise ein Profil f\u00fcr das CSV-Format oder f\u00fcr Daten, die als Array von 64-Bit-Zahlen gespeichert sind. Die Komprimierung erfolgt durch die Auswahl eines Profils mit dem Befehl \u201ezli list-profiles\u201c und dem Start des Komprimierungsprozesses mit dem Befehl \u201ezli compress \u2014profile profil_name\u201c. F\u00fcr die Dekompression reicht es aus, \u201ezli decompress\u201c auszuf\u00fchren. <\/p>\n

F\u00fcr spezifische Formate muss ein eigenes Profil erstellt werden, indem der Befehl \u201ezli train\u201c verwendet wird, der Muster in den Daten erkennt und ein Profil mit optimalem Komprimierungsgrad erstellt. Mit der Option \u201e\u2014pareto-frontier\u201c kann das erstellte Profil in Richtung einer Beschleunigung der Verpackung oder Dekompression optimiert werden, wobei der Komprimierungsgrad verringert wird. Zum Beschreiben komplexer Formate mit verschachtelten Strukturen und zur Bestimmung der Anordnung der Datenformate innerhalb der Strukturen kann die Sprache SDDL (Simple Data Description Language) verwendet werden. <\/p>\n

Die Methode zur Erstellung optimaler Komprimierer basiert auf der Anwendung eines Sets primitiver Kodierer, von denen jeder f\u00fcr bestimmte Datentypen und -folgen am effektivsten ist. F\u00fcr das Komprimieren wird ein gerichteter azyklischer Graph zur Datenverarbeitung erstellt, dessen Knoten Codec sind und deren Kanten Varianten der Daten im verarbeiteten Format darstellen. Je nach dem Typ der eingehenden Daten wird die optimalste Kette von Codecs ausgew\u00e4hlt, um das empfangene Datenelement zu komprimieren. Bei dieser Organisation wird der Dateikopf von einem Codec komprimiert, das Feld mit ganzzahligen Daten von einem zweiten, das Feld mit einem sich erh\u00f6henden Z\u00e4hler von einem dritten und das Feld mit Zeichenfolgen von einem vierten.

\"Das<\/center>
\n
Quelle: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041a\u043e\u043c\u043f\u0430\u043d\u0438\u044f Meta* \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u043b\u0430 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u0439 \u0434\u043b\u044f \u0441\u0436\u0430\u0442\u0438\u044f \u0438 \u0440\u0430\u0441\u043f\u0430\u043a\u043e\u0432\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 OpenZL, \u043f\u043e \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044e \u0441 \u0444\u043e\u0440\u043c\u0430\u0442\u0430\u043c\u0438 Zstd \u0438 XZ \u0434\u0435\u043c\u043e\u043d\u0441\u0442\u0440\u0438\u0440\u0443\u044e\u0449\u0438\u0439 \u0431\u043e\u043b\u0435\u0435 \u0432\u044b\u0441\u043e\u043a\u0438\u0439 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0441\u0436\u0430\u0442\u0438\u044f \u0438 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u044b. OpenZL \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0430\u043d \u0434\u043b\u044f \u044d\u0444\u0444\u0435\u043a\u0442\u0438\u0432\u043d\u043e\u0433\u043e \u0441\u0436\u0430\u0442\u0438\u044f \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u043d\u0430\u0431\u043e\u0440\u043e\u0432 \u0434\u0430\u043d\u043d\u044b\u0445, \u043d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u043f\u0440\u0438\u043c\u0435\u043d\u044f\u0435\u043c\u044b\u0445 \u043f\u0440\u0438 \u043c\u0430\u0448\u0438\u043d\u043d\u043e\u043c \u043e\u0431\u0443\u0447\u0435\u043d\u0438\u0438, \u0430 \u0442\u0430\u043a\u0436\u0435 \u0445\u0440\u0430\u043d\u0438\u043b\u0438\u0449, \u0441\u043e\u0434\u0435\u0440\u0436\u0430\u0449\u0438\u0445 \u043f\u043e\u043b\u044f \u0441 \u0440\u0430\u0437\u043b\u0438\u0447\u043d\u044b\u043c\u0438 \u043f\u043e\u0432\u0442\u043e\u0440\u044f\u044e\u0449\u0438\u043c\u0438\u0441\u044f \u0442\u0438\u043f\u0430\u043c\u0438 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u0438. \u041a\u043e\u0434 OpenZL \u043d\u0430\u043f\u0438\u0441\u0430\u043d \u043d\u0430 C\/C++ \u0438 \u043e\u0442\u043a\u0440\u044b\u0442 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":144567,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-144566","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Das OpenZL-Komprimierungssystem \u00fcberholt Zstd und XZ hinsichtlich Geschwindigkeit und Kompressionsgrad strukturierter Daten | ProHoster","description":"Die Firma Meta* hat das OpenZL-Toolset zur Kompression und Dekompression von Daten vorgestellt, das im Vergleich zu den Formaten Zstd und XZ ein h\u00f6heres Kompressionsniveau und schnellere Arbeitsgeschwindigkeiten aufweist.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/news\/sistema-szhatiya-openzl-operezhayushhaya-zstd-i-xz-po-skorosti-i-urovnyu-szhatiya-strukturirovannyh-dannyh","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u0421\u0438\u0441\u0442\u0435\u043c\u0430 \u0441\u0436\u0430\u0442\u0438\u044f OpenZL, \u043e\u043f\u0435\u0440\u0435\u0436\u0430\u044e\u0449\u0430\u044f Zstd \u0438 XZ \u043f\u043e \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u0438 \u0438 \u0443\u0440\u043e\u0432\u043d\u044e \u0441\u0436\u0430\u0442\u0438\u044f \u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0438\u0440\u043e\u0432\u0430\u043d\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 | ProHoster","og:description":"\u041a\u043e\u043c\u043f\u0430\u043d\u0438\u044f Meta* \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u043b\u0430 \u0438\u043d\u0441\u0442\u0440\u0443\u043c\u0435\u043d\u0442\u0430\u0440\u0438\u0439 \u0434\u043b\u044f \u0441\u0436\u0430\u0442\u0438\u044f \u0438 \u0440\u0430\u0441\u043f\u0430\u043a\u043e\u0432\u043a\u0438 \u0434\u0430\u043d\u043d\u044b\u0445 OpenZL, \u043f\u043e \u0441\u0440\u0430\u0432\u043d\u0435\u043d\u0438\u044e \u0441 \u0444\u043e\u0440\u043c\u0430\u0442\u0430\u043c\u0438 Zstd \u0438 XZ \u0434\u0435\u043c\u043e\u043d\u0441\u0442\u0440\u0438\u0440\u0443\u044e\u0449\u0438\u0439 \u0431\u043e\u043b\u0435\u0435 \u0432\u044b\u0441\u043e\u043a\u0438\u0439 \u0443\u0440\u043e\u0432\u0435\u043d\u044c \u0441\u0436\u0430\u0442\u0438\u044f \u0438 \u0441\u043a\u043e\u0440\u043e\u0441\u0442\u044c \u0440\u0430\u0431\u043e\u0442\u044b.","og:url":"https:\/\/prohoster.info\/de\/blog\/news\/sistema-szhatiya-openzl-operezhayushhaya-zstd-i-xz-po-skorosti-i-urovnyu-szhatiya-strukturirovannyh-dannyh","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2025-10-09T15:11:56+00:00","article:modified_time":"2025-10-09T15:11:56+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"144566","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":"default","schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-23 15:15:19","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2026-01-23 15:15:19","updated":"2026-01-23 15:15:19","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/144566","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=144566"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/144566\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media\/144567"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=144566"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=144566"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=144566"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}