Library Genesis — истинно забележителен интернет ресурс. Онлайн библиотека, предлагаща свободен достъп до повече от 2.7 милиона книги, направи дългоочаквана крачка тази седмица. Едно от уеб огледалата на библиотеката вече предлага възможност за сваляне на файлове чрез IPFS — разпределена файловата система.
И така, колекцията от книги на Library Genesis е качена в IPFS, запечатана и свързана с търсенето. Това означава, че сега е малко по-трудно да се лиши хората от достъп до нашето общо културно и научно наследство.
За LibGen
В началото на 2000-те години, в интернет, все още свободен от регулиране, съществуваха десетки компилации на научни книги. Най-големите колекции, които мога да си спомня — KoLXo3, mehmat и mirknig — съдържаха до 2007 година десетки хиляди учебници, публикации и други важни djvu и pdf файлове за студенти.
Както и всяка друга файлова сметища, тези колекции страдаха от общи проблеми с навигацията. Библиотеката Колхоз, например, съществуваше на над 20 DVD диска. Най-търсената част от библиотеката се премествала в обща файловата шарена на общежитието, а ако ти трябваше нещо рядко, то горко ти! В най-добрия случай щеше да трябва да купиш бира на притежателя на дисковете.
Въпреки това, колекциите все още бяха осезаеми по размер. И макар търсенето по имената на самите файлове често да се проваляше заради креативността на създателя на файла, с ръчен full-scan можеше да се извади нужната книга след упорито скролиране през десетина страници.
През 2008 година на rutracker.ru (тогава torrents.ru) ентусиаст публикува торенти, събрали съществуващите колекции книги в едно голямо купче. В същия тред се намери човек, който започна трудоемката работа по систематизиране на качените файлове и създаване на уеб интерфейс. Така се появи Library Genesis.
През всичките тези години от 2008 до настоящия момент LibGen е развиван и увеличавал собствените си книжни рафтове с усилията на общността. Метаданните на книгите бяха редактирани, а след това запазвани и разпространявани под формата на MySQL дъмпове за всички желаещи. Алтруистичният подход към метаданните доведе до появата на множество огледала и увеличаване на жизнеспособността на целия проект, въпреки нарасналата фрагментация.
Важно събитие в живота на библиотеката беше огледалното копие на базата данни Sci-Hub, започнало през 2013 година. Благодарение на сътрудничеството между две системи на едно място беше концентриран безпрецедентно качествен набор от данни — научни и художествени книги заедно с научни публикации. Имам предположение, че едно копие на съвместната база LibGen и Sci-Hub ще бъде достатъчно за възстановяване на научно-техническия напредък на цивилизацията, в случай че бъде загубен по време на катастрофа.
Днес библиотеката е сравнително устойчива и предлага уеб интерфейс, който позволява търсене по колекцията и сваляне на намерените файлове.
LibGen в IPFS
И макар социалната значимост на LibGen да е очевидна, също толкова очевидни са причините, поради които библиотеката постоянно е под заплаха от закриване. Именно това подтиква поддържателите на огледалата да търсят нови начини за осигуряване на устойчивост. Един от тези начини стана публикуването на колекцията в IPFS.
IPFS съществува от сравнително дълго време. На технологията при нейното появяване бяха възложени големи надежди, но не всички от тях се оправдаха. Въпреки това, развитието на мрежата продължава и появата на LibGen в нея може да засили потока от свежи сили и да бъде в полза на самата мрежа.
Упрощавайки до крайност, IPFS може да бъде наречена файлова система, разпростряна върху неопределен брой мрежови възли. Участниците в едноподобната мрежа могат да кешират файлове и да ги разпространяват на околните. Адресацията на файловете не се извършва по пътища, а по хеш от съдържанието на файла.
Преди известно време участниците в LibGen обявиха IPFS хешове и започнаха разпространение на файлове. Тази седмица линкове към файлове в IPFS започнаха да се появяват в резултатите от търсенето на някои огледала на LibGen. Освен това, благодарение на действията на активистите от екипа на Internet Archive и отразяването на събитието в reddit, в момента се наблюдава наплив от допълнителни седери както в IPFS, така и за разпространение на оригинални торенти.
Все още не е ясно дали самите IPFS хешове ще се появят в дамповете на базата LibGen, но изглежда, че това си заслужава да се очаква. Възможността да свалите метаданни на колекцията заедно с IPFS хешовете ще намали прага на влизане за създаване на собствено огледало, ще увеличи стабилността на цялата библиотека и ще приближи реализирането на мечтата на създателите на библиотеката.
P.S. За желаещите да помогнат на проекта е създаден ресурс , където се намират инструкции как да настроите IPFS.
Източник: habr.com
