Вы когда-нибудь задумывались, сколько информации бесследно потеряно? Ведь информация — это то, ради чего Хабр существует. Знаете, что чаще всего случается с ресурсами основанными на пользовательских публикациях? Авторы вставляют изображения, картинки и видео со сторонних сайтов и через какое-то время они больше не доступны. Именно для этого когда-то был создан . Практика показала, что никто (кроме редакторов и нескольких энтузиастов) не загружает туда изображения самостоятельно. Потому в какой-то момент администрация Хабра сделала эту функцию автоматической — каждое изображение, которое встречается в публикации, автоматически загружается в хранилище и оттуда не пропадёт, пока существует сам Хабр. Конечно же, есть и исключения и , но сейчас не о них.
Самая большая проблема во всей этой схеме с загрузкой изображений в Habrastorage произошла во время её внедрения. К тому моменту некоторые старые публикации уже были без рисунков, а потому такими и остались. Сегодня мы попробуем выяснить, сколько же графической информации потерял Хабр с момента своего рождения. Кроме того, может нам удастся найти что-то из пропавшего? Ведь раздражает эта заглушка "изображение не может быть загружено", не так ли? Сегодняшний детектив посвящён именно этому. Приступим!
Возможно, вас в эту статью привело упоминание в ? Вероятно, в одной из ваших старых публикаций пропала картинка, а я её нашел. Если вам не хочется читать всю публикацию, можно просто пролистать до спойлера в самом конце (раздел Результаты), где перечислены все публикации и найденные изображения. Спасибо!
Вступление и методы
Наш детектив начнётся с самого начала (логично, правда?). С начала Хабра. Ведь чем раньше был опубликован какой-либо пост, тем больше шансов, что изображения из него затерялись где-то в истории. Именно потому начнём мы с 2006 года и пройдём немного вперёд.
В рассмотрении участвуют все публикации из 40 хабов, которые на данный момент находятся в начале рейтинга. Полный список этих хабов представлен под спойлером. На самом деле, многие из них тогда не существовали, однако при добавлении новых хабов публикации туда переносились.
Список хабов
, , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , , ,
Информация собиралась с помощью набора PHP скриптов. Каждая публикация была загружена, определено содержание тега < div id="post-content-body" > и проверено наличие тегов < img > внутри. Для каждого изображения сохранены ссылки на изображения с привязкой к ID публикации на Хабре. В дальнейшем анализируется именно эта информация.
Что и когда публиковали
2006
В самом начале Хабра публикаций было не так много, как сейчас, а картинок в них — ещё меньше. Всего в 2006 году (начиная с 05.06.2006) в перечисленных хабах был опубликован 221 пост. 53 из этих постов содержат всего 75 изображений. Максимум изображений (10 штук) в публикации "". 50 рисунков уже находятся на Habrastorage. Ещё 25 потеряно. Все они уникальны и не повторяются.
ເປັນຄວາມຈິງທີ່ຫນ້າສົນໃຈ: Два из изображений ведут на сам Хабр, но при этом недоступны уже давно. Это изображения http://www.habrahabr.ru/tmp/sup_blogs_preview.gif и http://www.habrahabr.ru/tmp/upgrade-chart.gif.
Итак, за 2006 год потеряно 33.3% изображений в публикациях.
2007
В 2007 количество публикаций существенно увеличилось, как и количество изображений — было опубликовано 1 713 постов. 599 Публикаций содержат 1 467 изображений. На Habrastorage перенесено 1 229 изображений, а 238 потеряно (16.2%).
ເປັນຄວາມຈິງທີ່ຫນ້າສົນໃຈ: ສິ່ງພິມ содержит максимум за 2007 год — 100 изображений и не содержит авторского текста.
Кроме того, часть из этих потерянных изображений повторяется. Так, одно из них встречается 6 раз в одной с всего 6 картинками. Также 21 раз повторяется изображение "Up.gif", 16 — "Down.gif" и 8 — "Same.gif" с одного домена. И все эти 45 изображений из , в котором всего 47 картинок.
Остаётся 191 уникальный < img >.
2008
Поскольку год от года количество публикаций на Хабре лишь увеличивался, в 2008 наш детектив рассмотрит 2 520 публикаций, а также 2 969 изображений. Заметили, именно в 2008 количество изображений в публикациях наконец-то превышает количество публикаций. При этом всего 1 207 постов содержат картинки, а максимум в 42 элемента графической информации представлен в публикации "". 1 943 изображения уже сохранены на Habrastorage, а 1 026 потеряны (34.6%).
ເປັນຄວາມຈິງທີ່ຫນ້າສົນໃຈ: Самое неожиданное изображение (а точнее, проблема в оформлении публикации) находится . В результате, Хабр пытается загрузить изображение по http://#/.
Рис. 1. Общая статистика рассмотренного
Можно ли восстановить хоть что-то?
Частичное восстановление не составляет особого труда. К примеру, самым "ленивым" способом будет использование в попытке загрузить сохранённые страницы публикаций. Кроме того, можно попробовать "найти" в архиве сами изображения по прямым ссылкам.
Lifehack: Проверять наличие изображений нужно во всех версиях страницы в архиве, не только самой старой и самой новой.
К сожалению, хотя этот метод и работает в части случаев, восстановить хотя бы половину картинок так сложно. Потому следующий шаг — проверка кросспостинга, оригиналов переводов и, естественно, архивных копий оригинальных страниц.
К тому же, можно попробовать найти желаемые изображения с помощью одного из неофициальных зеркал Хабра, которые когда-то работали и всё ещё хранят часть скопированной информации.
Последний и самый сложный вариант — использование поисковых систем. Если точно известно, что должно быть на изображении (есть описание и контекст), есть шанс найти файлы с таким же названием, если они когда-то кем-то были скопированы на другой ресурс.
Естественно, каждый следующий шаг увеличивает время поиска нелинейно.
Что удалось найти
Возможно, вас не сильно впечатлит количество найденных на данный момент изображений — их 300 (содержатся в 140 публикациях от 81 автора). Если учесть число "потеряшек" (1 242), то результат составляет около 24.2%. Почему пропавших изображений стало меньше, чем было? Из рассмотрения удалены все бесполезные изображения (вроде счётчиков просмотров) и несуществующие изображения (вроде уже упомянутого http://#/, а также ແລະອື່ນໆ).
Как вышло такое круглое число? Дело в том, что примерно на 300 закончились сутки поисков. Вначале, я собирался дойти до 333, но и 300 выглядят вполне неплохо. К тому же, на данный момент совсем непроверенными осталось около 33% всех "жертв поиска".
Рис. 2. Текущие результаты поисков
Все найденные изображение (кроме одного .bmp, с ним было бы 301) загружены на , а ссылки на них и публикации, а также индексы изображений в них приведены в следующем разделе.
Результаты
Итак, под спойлером приведены успешно найденные изображения, а также id публикаций, индекс рисунка внутри текста публикации (начиная с 1, не с 0) и автор публикации. Если вы — автор упомянутой публикаций, а найденные рисунки корректны, исправьте, пожалуйста, свои посты. Спасибо!
Кстати, некоторые изображения на самом деле всё ещё доступны для просмотра в публикациях, однако не перенесены на Habrastorage, а потому в какой-то момент тоже могут стать недоступными.
300 картинок
ຜູ້ຂຽນ
ID публикации
Индексы и ссылки
ຕົວຢ່າງ:
, , , ,
, , ,
,
, , ,
, ,
, , , ,
, , , ,
,
, , , ,
, , , ,
, , , , ,
,
, ,
,
,
, , , ,
, , , , , , ,
, , ,
, , ,
,
,
,
,
, , , , , ,
, ,
,
,
, , ,
, , , , , , , , , , , , , , ,
, , , , , , ,
, ,
, , , , , , , , , , , , , , , , ,
,
,
,
, ,
,
,
,
,
, , , , , , , , , , , , , , , , , , , ,
, ,
,
, , , , , , , , , , ,
, ,
ແທນທີ່ຈະເປັນການສະຫລຸບໄດ້
Возможно, кто-то посчитает, что восстановление такой устаревшей информации не имеет никакого смысла. А кроме того, часть из найденных изображений были бессмысленны и при их публикации. Несомненно, так и есть.
Любая информация важна. Как минимум, с точки зрения исторического анализа. Не говоря уже о том, что в некоторых авторских материалах она имеет ключевую роль. Да, на данный момент Хабру нет и 15 лет и некоторые из источников всё ещё доступны, но со временем их будет становиться всё меньше и меньше, а потому стоит задуматься заранее, останется ли что-то на потом, либо же будет вечное "изображение не доступно".
Ну и не стоит забывать, что заглушки недоступных картинок просто раздражают. Конечно, мало кто будет читать "какое-то старьё", но и такие люди найдутся. Потому, раз эти публикации на Хабре всё ещё есть, то и их содержание должно быть как можно более полным.
К сожалению, пока Habrastorage не поддерживает загрузку напрямую для всех форматов изображений, но может это когда-нибудь и будет исправлено.
Последняя проблема, которую хочется упомянуть, и о которой вы наверняка подумали, "а что, если автор уже давно не пользуется Хабром и ему не интересно исправлять старьё?" У меня этот вопрос в голове возникал и не раз, но решение здесь не так и сложно. Старые публикации всегда может исправить UFO в лице модераторов (вы ведь можете, ?) или администрации ( может выдать кому-то задание).
А что думаете вы, стоит пытаться восстановить хотя бы что-то?
На сегодня всё. Спасибо за внимание и да загрузятся все ваши изображения на Habrastorage без проблем! Пусть не будет такого
PS ຖ້າຫາກທ່ານພົບເຫັນ typos ຫຼືຄວາມຜິດພາດໃນຂໍ້ຄວາມ, ກະລຸນາບອກຂ້າພະເຈົ້າຮູ້. ນີ້ສາມາດເຮັດໄດ້ໂດຍການເລືອກສ່ວນຫນຶ່ງຂອງຂໍ້ຄວາມແລະກົດ "Ctrl / ⌘ + Enter" ຖ້າເຈົ້າມີ Ctrl / ⌘, ຫຼືຜ່ານ . ຖ້າທັງສອງທາງເລືອກບໍ່ສາມາດໃຊ້ໄດ້, ໃຫ້ຂຽນກ່ຽວກັບຂໍ້ຜິດພາດໃນຄໍາເຫັນ. ຂອບໃຈ!
PPS ບາງທີເຈົ້າອາດຈະສົນໃຈໃນການຄົ້ນຄວ້າ Habr ອື່ນໆຂອງຂ້ອຍຫຼືເຈົ້າຢາກແນະນໍາຫົວຂໍ້ຂອງເຈົ້າເອງສໍາລັບການພິມຕໍ່ໄປ, ຫຼືອາດຈະເປັນຊຸດໃຫມ່ຂອງສິ່ງພິມ.
ບ່ອນທີ່ຊອກຫາບັນຊີລາຍຊື່ແລະວິທີການເຮັດບົດສະເຫນີ
ຂໍ້ມູນທັງຫມົດສາມາດພົບໄດ້ໃນ repository ພິເສດ . ຢູ່ທີ່ນັ້ນ, ທ່ານຍັງສາມາດຊອກຫາຂໍ້ສະ ເໜີ ທີ່ໄດ້ປະກາດແລ້ວແລະສິ່ງທີ່ມີຢູ່ໃນວຽກງານ.
ນອກຈາກນັ້ນ, ທ່ານສາມາດກ່າວເຖິງຂ້ອຍ (ໂດຍການຂຽນ ) ໃນຄໍາເຫັນກັບສິ່ງພິມທີ່ເບິ່ງຄືວ່າຫນ້າສົນໃຈສໍາລັບທ່ານສໍາລັບການຄົ້ນຄວ້າຫຼືການວິເຄາະ.
ແຫຼ່ງຂໍ້ມູນ: www.habr.com