![\"De](\"\/wp-content\/uploads\/2020\/10\/6949d84197c211d1f4d980c426d3c657.png\")
<\/p>\n<\/p>\n
Library Genesis \u2014 een echte diamant van het internet. Deze online bibliotheek geeft vrij toegang tot meer dan 2,7 miljoen boeken en heeft deze week een langverwachte stap gezet. Een van de webspiegels van de bibliotheek biedt nu de mogelijkheid om bestanden te downloaden via IPFS \u2014 een gedistribueerd bestandssysteem.<\/p>\n
De boekencollectie van Library Genesis is dus ge\u00fcpload naar IPFS, vastgelegd en verbonden met de zoekfunctie. Dit betekent dat het nu iets moeilijker is geworden om mensen de toegang tot ons gemeenschappelijk culturele en wetenschappelijke erfgoed te ontzeggen.<\/p>\n
Aan het begin van de jaren 2000 lagen er in het nog ongereguleerde internet tientallen verzamelingen wetenschappelijke boeken. De grootste collecties die ik me kan herinneren \u2014 KoLXo3, mehmat en mirknig \u2014 bevatten tegen 2007 tienduizenden studieboeken, publicaties en andere belangrijke djvu's en pdf's voor studenten.<\/p>\n
Net als andere bestanddumpplaatsen hadden deze collecties te kampen met algemene navigatieproblemen. De Kolchoz-bibliotheek, bijvoorbeeld, bestond uit meer dan 20 dvd's. Het meest gevraagde gedeelte van de bibliotheek werd door oudere studenten naar een bestandenserver in het studentenhuis verplaatst, en als je iets zeldzaams nodig had, dan had je pech! Ten minste moest je betalen voor het bier van de eigenaar van de schijf.<\/p>\n
Toch waren de collecties nog steeds van tastbare omvang. En hoewel het zoeken op bestandsnamen vaak vastliep door de creativiteit van de bestandmaker, was het met een handmatige full-scan mogelijk om het gewenste boek te vinden na hard scrollen door tientallen pagina's.<\/p>\n
In 2008 werden op rutracker.ru (toen torrents.ru) torrents gepubliceerd door een enthousiasteling die bestaande boekencollecties samenvoegde tot \u00e9\u00e9n grote hoop. In dezelfde thread vond iemand de tijd om de ge\u00fcploade bestanden systematisch te ordenen en een webinterface te cre\u00ebren. Zo ontstond Library Genesis.<\/p>\n
Gedurende deze tijd, van 2008 tot nu, heeft LibGen zich ontwikkeld en zijn eigen boekenplanken gevuld dankzij de inzet van de gemeenschap. De metadata van boeken werd bewerkt, opgeslagen en vervolgens verspreid in de vorm van MySQL-dumps voor iedereen die dat wilde. Deze altru\u00efstische benadering van metadata leidde tot de creatie van een groot aantal spiegels en een verhoogde overlevingskans van het project, ondanks de toenemende fragmentatie.<\/p>\n
Een belangrijke mijlpaal in het leven van de bibliotheek was het spiegelen van de database van Sci-Hub, dat begon in 2013. Dankzij de samenwerking tussen de twee systemen is er op \u00e9\u00e9n plek een ongekend kwalitatieve dataset geconcentreerd \u2014 wetenschappelijke en literaire boeken samen met wetenschappelijke publicaties. Ik vermoed dat \u00e9\u00e9n dump van de gezamenlijke basis van LibGen en Sci-Hub voldoende zal zijn om de wetenschappelijk-technologische vooruitgang van de beschaving te herstellen in het geval van verlies tijdens een ramp.<\/p>\n
Vandaag de dag houdt de bibliotheek zich behoorlijk goed staande, met een webinterface die het zoeken in de collectie en het downloaden van gevonden bestanden mogelijk maakt.<\/p>\n
En hoewel de sociale betekenis van LibGen duidelijk is, zijn de redenen waarom de bibliotheek constant bedreigd wordt met sluiting ook even duidelijk. Dit heeft de maintainers van de mirrors aangespoord om nieuwe wegen te zoeken voor duurzaamheid. Een van deze wegen is het publiceren van de collectie op IPFS.<\/p>\n
IPFS is relatief recent ontstaan. Bij de introductie van de technologie waren er hoge verwachtingen, niet al die verwachtingen zijn echter waargemaakt. Desondanks gaat de ontwikkeling van het netwerk door en de komst van LibGen hierin kan de instroom van nieuwe krachten versterken en ten goede komen aan het netwerk zelf.<\/p>\n
Om het eenvoudig te stellen, kan IPFS worden beschouwd als een bestandssysteem dat over een onbeperkt aantal knopen in het netwerk is gespannen. De deelnemers van het peer-to-peer netwerk kunnen bestanden in hun cache opslaan en deze delen met anderen. De adressatie van bestanden gebeurt niet via paden, maar op basis van de hash van de inhoud van het bestand. <\/p>\n
Een tijd geleden hebben deelnemers van LibGen IPFS-hashes aangekondigd en zijn ze begonnen met het delen van bestanden. Deze week zijn links naar bestanden in IPFS begonnen te verschijnen in de zoekresultaten van sommige mirrors van LibGen. Bovendien, dankzij de acties van activisten van het Internet Archive-team en de aandacht die dit op reddit krijgt, is er nu een toestroom van extra seeders, zowel in IPFS als voor het delen van de originele torrents.<\/p>\n
Het is nog onbekend of de IPFS-hashes zelf in de dumps van de LibGen-database zullen verschijnen, maar het lijkt erop dat dit te verwachten valt. De mogelijkheid om metadata van de collectie samen met de IPFS-hashes te downloaden zal de instapdrempel voor het cre\u00ebren van een eigen mirror verlagen, de stabiliteit van de hele bibliotheek vergroten en de dromen van de oprichters van de bibliotheek dichterbij brengen.<\/p>\n
P.S. Voor degenen die het project willen helpen, is er een bron gemaakt