{"id":52513,"date":"2019-11-10T00:00:00","date_gmt":"2019-11-09T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2"},"modified":"2020-02-18T14:00:15","modified_gmt":"2020-02-18T11:00:15","slug":"obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","title":{"rendered":"Aktualisierung des Cluster-Dateisystems LizardFS 3.13.0-rc2","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Nach einem Jahr der Stille in der Entwicklung wurde wieder<\/a><\/noindex> an einem neuen Branch des ausfallsicheren verteilten Dateisystems LizardFS 3.13<\/a><\/noindex> und ver\u00f6ffentlicht<\/a><\/noindex> der zweite Kandidat f\u00fcr die Releases. K\u00fcrzlich gab es eine<\/a><\/noindex> \u00c4nderung des Eigent\u00fcmers der Firma, die LizardFS entwickelt; es wurde eine neue Leitung eingesetzt und die Entwickler haben gewechselt. In den letzten zwei Jahren hatte sich das Projekt vom Community-Einfluss zur\u00fcckgezogen und erhielt nicht die n\u00f6tige Aufmerksamkeit, aber das neue Team hat die Absicht, die fr\u00fcheren Beziehungen zur Community wiederzubeleben und enge Zusammenarbeit zu etablieren. Der Code des Projekts ist in C und C++ geschrieben und wird unter der GPLv3-Lizenz bereitgestellt.<\/a><\/noindex> unter der GPLv3-Lizenz. <\/p>\n

LizardFS ist<\/a><\/noindex> ein verteiltes, clusterbasiertes Dateisystem, das es erm\u00f6glicht, Daten \u00fcber verschiedene Server zu streuen, w\u00e4hrend der Zugriff in Form eines einzigen gro\u00dfen Volumes erfolgt, das wie traditionelle Festplattenteile verwaltet wird. Im eingebundenen Volume mit LizardFS werden POSIX-Dateiattribute, ACL, Sperren, Sockets, Pipes, Ger\u00e4tedateien sowie symbolische und harte Links unterst\u00fctzt. Das System hat keinen einzelnen Punkt des Versagens; alle Komponenten sind redundant. Die Parallelisierung von Datenoperationen wird unterst\u00fctzt (mehrere Clients k\u00f6nnen gleichzeitig auf Dateien zugreifen).<\/p>\n

Um die Ausfallsicherheit zu gew\u00e4hrleisten, werden Daten in Repliken aufgeteilt, die auf verschiedene Knoten mit Redundanz verteilt sind (mehrere Kopien auf verschiedenen Knoten). Im Falle eines Ausfalls von Knoten oder Speichern kann das System weiterhin ohne Informationsverlust arbeiten und verteilt die Daten automatisch unter Ber\u00fccksichtigung der verbleibenden Knoten neu. Zur Erweiterung des Speichers gen\u00fcgt es, neue Knoten anzuschlie\u00dfen, ohne den Betrieb f\u00fcr Wartungsarbeiten zu unterbrechen (das System repliziert automatisch einen Teil der Daten auf die neuen Server und balanciert den Speicher unter Ber\u00fccksichtigung der neuen Server). \u00c4hnlich kann man auch die Clustergr\u00f6\u00dfe verringern \u2013 es ist einfach m\u00f6glich, veraltete Hardware, die nicht mehr ben\u00f6tigt wird, abzuschalten.<\/p>\n

Daten und Metadaten werden getrennt gespeichert. Es wird empfohlen, zwei Metadatenserver im Master-Slave-Modus zu installieren, sowie mindestens zwei Datenspeicher-Server (Chunkserver). Zus\u00e4tzlich k\u00f6nnen Log-Server zur Sicherung der Metadaten verwendet werden, die Informationen \u00fcber \u00c4nderungen der Metadaten speichern und eine Wiederherstellung im Falle eines Ausfalls aller vorhandenen Metadatenserver erm\u00f6glichen. Jede Datei wird in Bl\u00f6cke (Chunks) von bis zu 64 MB aufgeteilt. Die Bl\u00f6cke werden je nach gew\u00e4hltem Replikationsmodus auf die Datenspeicher verteilt: Standard (explizite Festlegung der Anzahl der Kopien, die auf verschiedenen Knoten, einschlie\u00dflich speziellen Verzeichnissen, abgelegt werden \u2013 f\u00fcr wichtige Daten kann die Anzahl der Kopien erh\u00f6ht und f\u00fcr unwesentliche verringert werden), XOR (RAID5) und EC (RAID6).<\/p>\n

Der Speicher kann auf Petabyte-Gr\u00f6\u00dfen skaliert werden. Zu den Anwendungsbereichen geh\u00f6ren Archivierung, Speicherung von virtuellen Maschinen-Images, multimedialen Daten, Backups, Nutzung als DRC (Disaster Recovery Center) und als Speicher in Clustern f\u00fcr hochleistungsf\u00e4hige Berechnungen. LizardFS bietet eine sehr hohe Lesegeschwindigkeit f\u00fcr Dateien beliebiger Gr\u00f6\u00dfe und zeigt beim Schreiben eine gute Leistung, insbesondere bei gro\u00dfen und mittleren Dateien, wenn keine st\u00e4ndige Modifikation, intensive Nutzung offener Dateien und sporadische Operationen mit zahlreichen kleinen Dateien stattfinden.<\/p>\n

\"Aktualisierung<\/a><\/noindex><\/center><\/p>\n

Zu den Merkmalen des FS geh\u00f6rt auch die Unterst\u00fctzung von Snapshots, die den Zustand von Dateien zu einem bestimmten Zeitpunkt widerspiegeln, sowie eine integrierte Implementierung des \"Papierkorbs\" (Dateien werden nicht sofort gel\u00f6scht und sind eine Zeit lang zur Wiederherstellung verf\u00fcgbar). Der Zugang zum Bereich kann nach IP-Adresse oder Passwort eingeschr\u00e4nkt werden (\u00e4hnlich wie bei NFS). Es gibt Mechanismen f\u00fcr Quoten und Qualit\u00e4tsmanagement, die die Gr\u00f6\u00dfe und Bandbreite f\u00fcr bestimmte Benutzerkategorien begrenzen. Es ist m\u00f6glich, geografisch verteilte Speicher zu erstellen, deren Segmente in verschiedenen Rechenzentren untergebracht sind. <\/p>\n

Das Projekt LizardFS wurde 2013 als Fork MooseFS<\/a><\/noindex>, und zeichnet sich haupts\u00e4chlich durch einen Replikationsmodus auf Basis von Reed-Solomon-Fehlerkorrekturcodes (analog zu raidzN), erweiterte Unterst\u00fctzung von ACLs, einen Client f\u00fcr die Windows-Plattform, zus\u00e4tzliche Optimierungen (zum Beispiel werden bei der Kombination von Client und Speicherserver Bl\u00f6cke nach M\u00f6glichkeit von dem aktuellen Knoten bereitgestellt, w\u00e4hrend die Metadaten im Speicher zwischengespeichert werden), ein flexibleres Einstellsystem, Unterst\u00fctzung f\u00fcr vorzeitiges Datenlesen, Verzeichnistransaktionen und interne \u00dcberarbeitungen aus.<\/p>\n

Die Ver\u00f6ffentlichung von LizardFS 3.13.0 ist f\u00fcr Ende Dezember geplant. Eine der Hauptneuheiten von LizardFS 3.13 ist die Implementierung eines Konsensalgorithmus zur Gew\u00e4hrleistung der Ausfallsicherheit (Wechsel der Master-Server im Falle eines Ausfalls). Raft<\/a><\/noindex> (Hierbei kommt die eigene Implementierung von uRaft zum Einsatz, die zuvor in kommerziellen Produkten verwendet wurde). Der Einsatz von uRaft vereinfacht die Konfiguration und verringert die Ausfallzeiten bei der Wiederherstellung nach einem Ausfall, erfordert jedoch mindestens drei funktionierende Knoten, von denen einer f\u00fcr das Quorum genutzt wird. <\/p>\n

Weitere \u00c4nderungen umfassen: einen neuen Client basierend auf dem FUSE3-Subsystem, die Behebung von Fehlerkorrekturen und das nfs-ganesha-Plugin wurde in C neu geschrieben. In der Aktualisierung 3.13.0-rc2 wurden mehrere kritische Fehler behoben, die fr\u00fchere Testversionen der 3.13-Zweigstelle nahezu unbrauchbar machten (Fehlerbehebungen f\u00fcr den 3.12-Zweig wurden bisher nicht ver\u00f6ffentlicht und das Upgrade von 3.12 auf 3.13 f\u00fchrt weiterhin zu einem vollst\u00e4ndigen Datenverlust).<\/p>\n

Im Jahr 2020 wird der Schwerpunkt auf der Entwicklung liegen
\nAgama<\/a><\/noindex>, eines komplett neu geschriebenen LizardFS-Kernels, der nach Angaben der Entwickler eine dreifache Leistungssteigerung im Vergleich zur Version 3.12 bieten wird. In Agama erfolgt der \u00dcbergang zu einer ereignisgesteuerten Architektur (event-driven) sowie asynchronem I\/O basierend auf asio<\/a><\/noindex>, haupts\u00e4chlich im Benutzerspeicher (um die Abh\u00e4ngigkeit von Kernel-Caching-Mechanismen zu verringern). Dar\u00fcber hinaus werden ein neues Debugging-System und ein Netzwerkaktivit\u00e4tsanalysator mit Unterst\u00fctzung f\u00fcr automatisches Performance-Tuning angeboten. <\/p>\n

Im LizardFS-Client wird umfassende Unterst\u00fctzung f\u00fcr die Versionierung von Schreibvorg\u00e4ngen hinzugef\u00fcgt, was die Zuverl\u00e4ssigkeit der Wiederherstellung nach einem Ausfall verbessert, Probleme l\u00f6st, die beim gemeinsamen Zugriff mehrerer Clients auf dieselben Daten auftreten, und eine erhebliche Steigerung der Leistung erm\u00f6glicht. Der Client wird auf ein eigenes, im Benutzermodus betriebenes Netzwerk-Subsystem migriert. Der erste funktionale Prototyp von LizardFS, basierend auf Agama, ist f\u00fcr das zweite Quartal 2020 geplant. Zur gleichen Zeit sollen auch Mittel zur Integration von LizardFS mit der Kubernetes-Plattform bereitgestellt werden.<\/p>\n

<\/a><\/noindex><\/p>\n

Quelle: opennet.ru<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardF 3.13 \u0438 \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043d \u0432\u0442\u043e\u0440\u043e\u0439 \u043a\u0430\u043d\u0434\u0430\u0434\u0430\u0442 \u0432 \u0440\u0435\u043b\u0438\u0437\u044b. \u041d\u0435\u0434\u0430\u0432\u043d\u043e \u043f\u0440\u043e\u0438\u0437\u043e\u0448\u043b\u0430 \u0441\u043c\u0435\u043d\u0430 \u0432\u043b\u0430\u0434\u0435\u043b\u044c\u0446\u0435\u0432 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438, \u0440\u0430\u0437\u0432\u0438\u0432\u0430\u044e\u0449\u0435\u0439 LizardFS, \u0431\u044b\u043b\u043e \u043f\u0440\u0438\u043d\u044f\u0442\u043e \u043d\u043e\u0432\u043e\u0435 \u0440\u0443\u043a\u043e\u0432\u043e\u0434\u0441\u0442\u0432\u043e \u0438 \u0441\u043c\u0435\u043d\u0438\u043b\u0438\u0441\u044c \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u0447\u0438\u043a\u0438. \u041f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0435 \u0434\u0432\u0430 \u0433\u043e\u0434\u0430 \u043f\u0440\u043e\u0435\u043a\u0442 \u043e\u0442\u0441\u0442\u0440\u0430\u043d\u0438\u043b\u0441\u044f \u043e\u0442 \u0441\u043e\u043e\u0431\u0449\u0435\u0441\u0442\u0432\u0430 \u0438 \u043d\u0435 \u0443\u0434\u0435\u043b\u044f\u043b \u0435\u043c\u0443 \u0434\u043e\u043b\u0436\u043d\u043e\u0433\u043e \u0432\u043d\u0438\u043c\u0430\u043d\u0438\u044f, \u043d\u043e \u043d\u043e\u0432\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043d\u0430\u043c\u0435\u0440\u0435\u043d\u0430 \u0432\u043e\u0437\u0440\u043e\u0434\u0438\u0442\u044c \u043f\u0440\u0435\u0436\u043d\u0438\u0435 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":52514,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-52513","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-novosti-interneta"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Update des Cluster-Dateisystems LizardFS 3.13.0-rc2 | ProHoster","description":"Nach einer einj\u00e4hrigen Ruhepause wurde die Arbeit an einem neuen Zweig des fehlertoleranten verteilten Dateisystems wieder aufgenommen.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041e\u0431\u043d\u043e\u0432\u043b\u0435\u043d\u0438\u0435 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b LizardFS 3.13.0-rc2 | ProHoster","og:description":"\u041f\u043e\u0441\u043b\u0435 \u0433\u043e\u0434\u0438\u0447\u043d\u043e\u0433\u043e \u0437\u0430\u0442\u0438\u0448\u044c\u044f \u0432 \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u0432\u043e\u0437\u043e\u0431\u043d\u043e\u0432\u0438\u043b\u0430\u0441\u044c \u0440\u0430\u0431\u043e\u0442\u0430 \u043d\u0430\u0434 \u043d\u043e\u0432\u043e\u0439 \u0432\u0435\u0442\u043a\u043e\u0439 \u043e\u0442\u043a\u0430\u0437\u043e\u0443\u0441\u0442\u043e\u0439\u0447\u0438\u0432\u043e\u0439 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0451\u043d\u043d\u043e\u0439 \u0444\u0430\u0439\u043b\u043e\u0432\u043e\u0439.","og:url":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/obnovlenie-klasternoj-fajlovoj-sistemy-lizardfs-3-13-0-rc2","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-11-09T21:00:00+00:00","article:modified_time":"2020-02-18T11:00:15+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"52513","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-24 03:51:39","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 17:15:56","updated":"2026-01-24 03:51:39","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/52513","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=52513"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/52513\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media\/52514"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=52513"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=52513"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=52513"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}