Ужас! Всички архиви, запазени от archive.org за *.hit.bg са изчезнали!
Който запазил - запазил...
Цъкнете на връзката по-горе за да се убедите. До преди няколко дена тези връзки към архиви работеха.
И май не е само hit.bg. И архивите на други сайтове ги няма!
https://web.archive.org/web/20130618064824/http://www.argumentx.com/* * *
Ето и причината:
If wayback has archived it before the robots.txt the addition of robots DOES NOT delete the content, just makes it inaccessible.
http://archive.org/post/406632/why-does-the-wayback-machine-pay-attention-to-robotstxtМай имат бъг, защото дори и несъществуващи сайтове (които нямат robots.txt) са недостъпни. Би следвало архивите на сайтовете, които не сервират съдържание (включително не сервират robots.txt) да могат да се преглеждат на archive.org.
* * *
Масовото унищожаване на потребителско генерирано съдържание е сериозен проблем.
https://konklone.com/post/quora-keeps-the-worlds-knowledge-for-itself