Library Genesis ist ein wahres Juwel des Internets. Die Online-Bibliothek, die kostenlosen Zugang zu mehr als 2.7 Millionen Büchern bietet, hat diese Woche einen lang erwarteten Schritt unternommen. Einer der Webspiegel der Bibliothek ermöglicht nun den Download von Dateien über IPFS, ein verteiltes Dateisystem.
Daher wird die Buchsammlung der Library Genesis in IPFS geladen, angeheftet und mit der Suche verknüpft. Und das bedeutet, dass es jetzt etwas schwieriger geworden ist, Menschen den Zugang zu unserem gemeinsamen kulturellen und wissenschaftlichen Erbe zu verwehren.
Über LibGen
Zu Beginn der 3er Jahre lagen Dutzende Sammlungen wissenschaftlicher Bücher im noch unregulierten Internet. Die größten Sammlungen, an die ich mich erinnern kann – KoLXo2007, mehmat und mirknig – enthielten XNUMX Zehntausende Lehrbücher, Veröffentlichungen und andere wichtige Djvushek- und PDF-Dateien für Studenten.
Wie alle anderen Datei-Dumps litten diese Sammlungen unter allgemeinen Navigationsproblemen. Die Kolchose-Bibliothek beispielsweise lebte von mehr als 20 DVDs. Der am meisten nachgefragte Teil der Bibliothek wurde von den Ältesten in die Aktensphäre des Wohnheims verlegt, und wenn Sie etwas Seltenes brauchten, dann wehe Ihnen! Zumindest hast du ein Bier für den Besitzer der Scheiben bekommen.
Die Sammlungen waren jedoch immer noch greifbar. Und obwohl die Suche nach den Namen der Dateien selbst oft an der Kreativität des Erstellers der Datei scheiterte, konnte ein manueller Vollscan nach hartnäckigem Scrollen durch ein Dutzend Seiten das gewünschte Buch finden.
Im Jahr 2008 veröffentlichte ein Enthusiast auf rutracker.ru (damals torrents.ru) Torrents, die die vorhandenen Büchersammlungen zu einem großen Stapel zusammenfassten. Im selben Thread gab es eine Person, die mit der mühsamen Arbeit begann, die hochgeladenen Dateien zu organisieren und eine Weboberfläche zu erstellen. So wurde Library Genesis geboren.
Die ganze Zeit über, von 2008 bis heute, hat LibGen mit Hilfe der Community seine eigenen Bücherregale entwickelt und aufgefüllt. Die Buchmetadaten wurden bearbeitet und dann gespeichert und als MySQL-Dumps an die Öffentlichkeit verteilt. Die altruistische Haltung gegenüber Metadaten führte zur Entstehung einer großen Anzahl von Spiegeln und erhöhte die Überlebensfähigkeit des gesamten Projekts trotz zunehmender Fragmentierung.
Ein wichtiger Meilenstein im Leben der Bibliothek war die Spiegelung der Sci-Hub-Datenbank, die 2013 begann. Dank der Zusammenarbeit der beiden Systeme wurde ein beispielloser Datensatz an einem Ort konzentriert – Wissenschafts- und Belletristikbücher sowie wissenschaftliche Veröffentlichungen. Ich gehe davon aus, dass ein einziger Abwurf der gemeinsamen Basis von LibGen und Sci-Hub ausreichen wird, um den wissenschaftlichen und technologischen Fortschritt der Zivilisation wiederherzustellen, falls dieser während einer Katastrophe verloren geht.
Heute läuft die Bibliothek recht stabil und verfügt über eine Weboberfläche, mit der Sie die Sammlung durchsuchen und die gefundenen Dateien herunterladen können.
LibGen in IPFS
Und obwohl die gesellschaftliche Bedeutung von LibGen offensichtlich ist, sind die Gründe, warum die Bibliothek ständig von der Schließung bedroht ist, ebenso offensichtlich. Dies ist der Grund, warum Spiegelbetreuer nach neuen Wegen suchen, um Nachhaltigkeit sicherzustellen. Eine dieser Möglichkeiten bestand darin, die Sammlung in IPFS zu veröffentlichen.
IPFS erschien vor relativ langer Zeit. Bei ihrem Erscheinen wurden große Hoffnungen in die Technologie gesetzt, die jedoch nicht alle gerechtfertigt waren. Dennoch geht die Entwicklung des Netzwerks weiter, und das Erscheinen von LibGen darin kann den Zustrom neuer Kräfte verstärken und dem Netzwerk selbst in die Hände spielen.
Vereinfacht ausgedrückt kann man IPFS als ein Dateisystem bezeichnen, das sich über eine unbegrenzte Anzahl von Netzwerkknoten erstreckt. Peer-to-Peer-Netzwerkmitglieder können Dateien selbst zwischenspeichern und an andere verteilen. Dateien werden nicht über Pfade angesprochen, sondern über einen Hash aus dem Inhalt der Datei.
Vor einiger Zeit kündigten LibGen-Teilnehmer IPFS-Hashes an und begannen mit der Verteilung von Dateien. Diese Woche tauchten in den Suchergebnissen einiger LibGen-Spiegel Links zu Dateien in IPFS auf. Darüber hinaus gibt es dank der Aktionen der Aktivisten des Internet Archive-Teams und der Berichterstattung über das Geschehen auf reddit nun einen Zustrom zusätzlicher Seeder sowohl bei IPFS als auch bei der Verbreitung von Original-Torrents.
Es ist noch nicht bekannt, ob die IPFS-Hashes selbst in den LibGen-Datenbank-Dumps erscheinen werden, aber es scheint, dass dies zu erwarten ist. Die Möglichkeit, die Metadaten der Sammlung zusammen mit IPFS-Hashes herunterzuladen, senkt die Einstiegsschwelle für die Erstellung eines eigenen Spiegels, erhöht die Stabilität der gesamten Bibliothek und bringt den Traum der Ersteller der Bibliothek näher an die Verwirklichung.
PS Für diejenigen, die dem Projekt helfen möchten, wurde eine Ressource erstellt , Anweisungen zur Konfiguration von IPFS live darauf.
Source: habr.com