Library Genesis - сапраўдны дыямент Інтэрнэту. Анлайн-бібліятэка, якая прадстаўляе вольны доступ больш за да 2.7 мільёнаў кніг, на гэтым тыдні зрабіла доўгачаканы крок. Адно з вэб-люстэркаў бібліятэкі зараз дае магчымасць спампаваць файлы праз IPFS - размеркаваную файлавую сістэму.
Такім чынам, калекцыя кніг Library Genesis загружана ў IPFS, запінена і злучана з пошукам. А гэта значыць, што цяпер пазбавіць людзей доступу да нашай агульнай культурнай і навуковай спадчыны стала крыху цяжэй.
Аб LibGen
У пачатку нулявых у пакуль яшчэ вольным ад рэгулявання інтэрнэце ляжалі тузіны зборнікаў навуковых кніг. Найбуйныя калекцыі з тых, што я магу ўспомніць - KoLXo3, mehmat і mirknig - утрымоўвалі да 2007 году дзясяткі тысяч падручнікаў, публікацый і іншых важных djvuшек і pdfок для студэнтаў.
Як і любыя іншыя звалкі файлаў, гэтыя калекцыі пакутавалі ад агульных праблем з навігацыяй. Бібліятэка Калгас, напрыклад, жыла на 20+ DVD-дысках. Найбольш запатрабаваная частка бібліятэкі рукамі старшакоў перасялялася ў файлавую шары інтэрната, а калі трэба было нешта рэдкае, то гора табе! Як мінімум ты пападаў на піва для гаспадара дыскаў.
Тым не менш, калекцыі былі ўсё яшчэ якія адчуваюцца памераў. І хоць пошук па назовах саміх файлаў часцяком разбіваўся аб крэатыўнасць стваральніка файла, ручным full-scanам можна было выцягнуць патрэбную кнігу пасля зацятага пракручвання дзясятка старонак.
У 2008 годзе на rutracker.ru (тады torrents.ru) энтузіястам былі апублікаваныя торэнты, якія скампанавалі існавалі зборнікі кніг у адну вялікую кучу. У гэтым жа трэдзе знайшоўся чалавек, які пачаў карпатлівую працу па сістэматызацыі выкладзеных файлаў і стварэнні вэб-інтэрфейсу. Так узнік Library Genesis.
Увесь гэты час з 2008 гады і да бягучага моманту LibGen развіваўся і папаўняў уласныя кніжныя паліцы сіламі супольнасці. Метададзеныя кніг рэдагаваліся, а затым захоўваліся і распаўсюджваліся ў выглядзе дампаў MySQL для ўсіх жадаючых. Альтруістычнае стаўленне да метададзеных прывяло да з'яўлення вялікай колькасці люстэркаў і павышэнню выжывальнасці ўсяго праекта, нягледзячы на ўзрослую фрагментацыю.
Важнай вяхой у жыцці бібліятэкі стала люстраванне базы даных Sci-Hub, якое стартавала ў 2013 годзе. Дзякуючы калабарацыі дзвюх сістэм у адным месцы аказаўся сканцэнтраваны небывалы па якасці набор даных — навуковыя і мастацкія кнігі разам з навуковымі публікацыямі. У мяне ёсць здагадка, што аднаго дампа сумеснай базы LibGen і Sci-Hub будзе дастаткова для аднаўлення навукова-тэхнічнага прагрэсу цывілізацыі ў выпадку яго страты ў ходзе катастрофы.
Сёння бібліятэка даволі ўстойліва трымаецца на плаву, мае вэб-інтэрфейс, які дазваляе шукаць па калекцыі і спампоўваць знойдзеныя файлы.
LibGen у IPFS
І хоць сацыяльная значнасць LibGen відавочная, гэтак жа відавочныя прычыны, з-за якіх бібліятэка ўвесь час знаходзіцца пад пагрозай закрыцця. Менавіта гэта падштурхоўвае мэйнтэйнераў люстэркаў шукаць новыя шляхі забеспячэння ўстойлівасці. Адным з такіх шляхоў стала публікацыя калекцыі ў IPFS.
IPFS з'явіўся адносна даўно. На тэхналогію пры яе з'яўленні ўскладаліся вялікія спадзяванні і не ўсе з іх апраўдаліся. Тым не менш, развіццё сеткі працягваецца, а з'яўленне ў ёй LibGen можа ўзмацніць прыток свежых сіл і згуляць на руку самой сетцы.
Спрашчаючы да мяжы, IPFS можна назваць файлавай сістэмай, нацягнутай на нявызначаную колькасць вузлоў сеткі. Удзельнікі аднарангавай сеткі могуць кэшаваць файлы ў сябе і раздаваць іх навакольным. Адрасаванне файлаў адбываецца не па шляхах, а па хешу ад зместу файла.
Некаторы час таму ўдзельнікі LibGen анансавалі IPFS-хэшы і ўсталі на раздачу файлаў. На гэтым тыдні спасылкі на файлы ў IPFS сталі з'яўляцца ў выніках пошуку некаторых люстэркаў LibGen. Акрамя таго, дзякуючы дзеянням актывістаў каманды Internet Archive і асвятленню таго, што адбываецца на reddit, зараз ідзе наплыў дадатковых сідэраў як у IPFS, так і на раздачу арыгінальных торэнтаў.
Пакуль невядома, ці з'явяцца самі хешы IPFS у дампах базы LibGen, але здаецца, што гэтага варта чакаць. Магчымасць спампаваць метададзеныя калекцыі разам з IPFS-хэшамі знізіць парог уваходу для стварэння ўласнага люстэрка, павялічыць стабільнасць усёй бібліятэкі і наблізіць выкананне мары стваральнікаў бібліятэкі.
PS Для жадаючых дапамагчы праекту створаны рэсурс , на ім жывуць інструкцыі як наладзіць IPFS.
Крыніца: habr.com