Library Genesis — un vero gioiello di Internet. La biblioteca online che offre accesso gratuito a oltre 2,7 milioni di libri ha fatto questa settimana un passo atteso. Uno dei mirror del sito ora consente di scaricare file tramite IPFS — un sistema di archiviazione distribuito.
Quindi, la collezione di libri di Library Genesis è stata caricata su IPFS, pinata e collegata alla ricerca. Questo significa che privare le persone dell’accesso al nostro patrimonio culturale e scientifico condiviso è ora un po' più difficile.
Su LibGen
All’inizio degli anni 2000, nel web ancora libero da regolamentazioni, giacevano dozzine di raccolte di libri scientifici. Le più grandi collezioni che riesco a ricordare — KoLXo3, mehmat e mirknig — contenevano, entro il 2007, decine di migliaia di testi, pubblicazioni e altri importanti djvu e pdf per studenti.
Come tutte le altre discariche di file, queste collezioni soffrivano di comuni problemi di navigazione. La Biblioteca Kolkhoz, per esempio, viveva su oltre 20 dischi DVD. La parte più richiesta della biblioteca veniva trasportata dai più grandi in una condivisione di file nel dormitorio, e se avevi bisogno di qualcosa di raro, guai a te! Almeno, finivi per offrire una birra al padrone dei dischi.
Tuttavia, le collezioni erano ancora di dimensioni tangibili. E sebbene la ricerca per nomi dei file spesso inciampasse nella creatività del creatore del file, con una scansione manuale si poteva estrarre il libro desiderato dopo aver scorrere con tenacia decine di pagine.
Nel 2008, su rutracker.ru (allora torrents.ru), un appassionato pubblicò torrent che raggruppavano le collezioni di libri esistenti in un'unica grande raccolta. Nello stesso thread, si fece avanti una persona che iniziò un meticoloso lavoro di sistematizzazione dei file caricati e creazione di un'interfaccia web. Nasce così Library Genesis.
Da allora, dal 2008 fino ad oggi, LibGen si è evoluto e ha arricchito le proprie biblioteche con l'aiuto della comunità. I metadati dei libri venivano modificati e successivamente conservati e distribuiti sotto forma di dump MySQL per tutti coloro che lo desideravano. Questo atteggiamento altruistico verso i metadati ha portato alla creazione di numerosi mirror e all'aumento della sostenibilità dell'intero progetto, nonostante l'aumentata frammentazione.
Un momento cruciale nella vita della biblioteca è stata la replica del database di Sci-Hub, avvenuta nel 2013. Grazie alla collaborazione di due sistemi, è stato concentrato in un unico luogo un insieme di dati senza precedenti per qualità: libri scientifici e di fiction insieme a pubblicazioni scientifiche. Ho il sospetto che un unico dump del database congiunto di LibGen e Sci-Hub possa essere sufficiente per ripristinare il progresso scientifico e tecnologico della civiltà in caso di perdita a causa di una catastrofe.
Oggi la biblioteca si mantiene abbastanza bene a galla, dispone di un'interfaccia web che consente di cercare nella collezione e scaricare i file trovati.
LibGen su IPFS
E sebbene l'importanza sociale di LibGen sia evidente, altrettanto evidenti sono le ragioni per cui la biblioteca è costantemente minacciata di chiusura. Questo spinge i manutentori delle repliche a cercare nuove vie per garantire la sostenibilità. Una di queste vie è stata la pubblicazione della collezione su IPFS.
IPFS è emerso relativamente tempo fa. All'inizio, si riponevano grandi speranze nella tecnologia, e non tutte sono state soddisfatte. Tuttavia, lo sviluppo della rete continua, e l'ingresso di LibGen potrebbe rafforzare l'afflusso di nuove forze e giovare alla rete stessa.
In termini semplici, IPFS può essere definito come un file system distribuito su un numero indefinito di nodi della rete. I partecipanti alla rete peer-to-peer possono memorizzare file in cache e condividerli con gli altri. L'indirizzamento dei file avviene non attraverso percorsi, ma attraverso l'hash del contenuto del file.
Alcuni tempo fa, i partecipanti di LibGen hanno annunciato gli hash IPFS e hanno iniziato a condividere file. Questa settimana, i link ai file in IPFS hanno cominciato a comparire nei risultati di ricerca di alcuni specchi di LibGen. Inoltre, grazie alle azioni degli attivisti del team Internet Archive e alla copertura della situazione su reddit, si sta osservando un afflusso di ulteriori seeders sia su IPFS sia per la condivisione dei torrent originali.
Non è ancora chiaro se gli hash IPFS appariranno nei dump del database LibGen, ma sembra che ci si possa aspettare. La possibilità di scaricare i metadati della collezione insieme agli hash IPFS abbasserà la barriera d'ingresso per creare il proprio mirror, aumenterà la stabilità dell'intera biblioteca e avvicinerà all'obiettivo dei creatori della biblioteca.
P.S. Per chi desidera aiutare il progetto è stata creata una risorsa , dove sono disponibili istruzioni su come configurare IPFS.
Fonte: habr.com
