Library Genesis é unha auténtica xoia de Internet. A biblioteca en liña, que ofrece acceso gratuíto a máis de 2.7 millóns de libros, deu esta semana un paso moi esperado. Un dos espellos web da biblioteca agora permite descargar ficheiros a través de IPFS, un sistema de ficheiros distribuído.
Entón, a colección de libros de Library Genesis cárgase en IPFS, está fixada e ligada á busca. E isto significa que agora volveuse un pouco máis difícil privar á xente do acceso ao noso patrimonio cultural e científico común.
Sobre LibGen
A principios da década de 3, decenas de coleccións de libros científicos xacían na Internet aínda non regulada. As coleccións máis grandes que lembro - KoLXo2007, mehmat e mirknig - contiñan ata XNUMX decenas de miles de libros de texto, publicacións e outros djvushek e pdf importantes para estudantes.
Como calquera outro vertedoiro de ficheiros, estas coleccións sufriron problemas xerais de navegación. A biblioteca Kolkhoz, por exemplo, vivía en máis de 20 DVDs. A parte máis demandada da biblioteca foi trasladada polas mans dos maiores á esfera do arquivo do albergue, e se necesitabas algo raro, pois ai de ti! Polo menos conseguiches unha cervexa para o dono dos discos.
Non obstante, as coleccións aínda eran tanxibles. E aínda que a busca dos nomes dos propios ficheiros adoitaba fallar na creatividade do creador do ficheiro, unha exploración manual completa podería sacar o libro desexado despois de percorrer teimudamente unha ducia de páxinas.
En 2008, en rutracker.ru (entón torrents.ru), un entusiasta publicou torrents que combinaban as coleccións existentes de libros nunha gran pila. No mesmo fío, había unha persoa que comezou o minucioso traballo de organizar os ficheiros subidos e crear unha interface web. Así naceu Library Genesis.
Durante todo este tempo desde 2008 ata o momento actual, LibGen estivo desenvolvendo e repoñendo as súas propias estanterías coa axuda da comunidade. Editáronse os metadatos do libro e despois gardáronse e distribuíronse como vertedoiros de MySQL ao público. A actitude altruísta cara aos metadatos provocou a aparición dun gran número de espellos e aumentou a supervivencia de todo o proxecto, a pesar da maior fragmentación.
Un fito importante na vida da biblioteca foi a duplicación da base de datos Sci-Hub, que comezou en 2013. Grazas á colaboración dos dous sistemas, concentrouse nun só lugar un conxunto de datos sen precedentes: libros científicos e de ficción, xunto con publicacións científicas. Supoño que un vertedoiro da base conxunta de LibGen e Sci-Hub será suficiente para restaurar o progreso científico e tecnolóxico da civilización no caso de que se perda durante unha catástrofe.
Hoxe, a biblioteca está bastante estable a flote, ten unha interface web que permite buscar na colección e descargar os ficheiros atopados.
LibGen en IPFS
E aínda que a importancia social de LibGen é obvia, as razóns polas que a biblioteca está constantemente baixo ameaza de peche son igualmente obvias. Isto é o que impulsa aos mantedores de espellos a buscar novas formas de garantir a sustentabilidade. Unha destas formas foi publicar a colección en IPFS.
IPFS apareceu hai relativamente tempo. Púxose grandes esperanzas na tecnoloxía cando apareceu, e non todas estaban xustificadas. Non obstante, o desenvolvemento da rede continúa e a aparición de LibGen nel pode aumentar a entrada de forzas novas e xogar nas mans da propia rede.
Simplificando ata o límite, IPFS pódese chamar un sistema de ficheiros estendido sobre un número indefinido de nós de rede. Os membros da rede peer-to-peer poden almacenar ficheiros na caché por si mesmos e distribuílos a outros. Os ficheiros non están dirixidos por rutas, senón por un hash do contido do ficheiro.
Hai tempo, os participantes de LibGen anunciaron hash de IPFS e comezaron a distribuír ficheiros. Esta semana comezaron a aparecer ligazóns a ficheiros en IPFS nos resultados de busca dalgúns réplicas de LibGen. Ademais, grazas ás accións dos activistas do equipo de Internet Archive e á cobertura do que está a suceder en reddit, agora hai unha afluencia de sementadores adicionais tanto en IPFS como na distribución de torrents orixinais.
Aínda non se sabe se os propios hash de IPFS aparecerán nos volcados de bases de datos de LibGen, pero parece que é de esperar. A posibilidade de descargar os metadatos da colección xunto cos hash de IPFS reducirá o limiar de entrada para crear o teu propio espello, aumentará a estabilidade de toda a biblioteca e achegará o soño dos creadores da biblioteca á realización.
PD Para quen queira axudar ao proxecto, creouse un recurso , instrucións sobre como configurar IPFS en directo nel.
Fonte: www.habr.com