Wayback Machine: відмінності між версіями

Історично, Wayback Machine поважав стандарт винятків для роботів ([[Robots.txt]]), визначаючи, чи сайт можна обходити чи ні; або, якщо вже робот його обійшов, то чи ці архіви будуть у відкритому доступі. Власники веб-сайту мають можливість відмовитися від послуг Wayback Machine за допомогою robots.txt. Правила robots.txt застосовуються заднім числом; якщо сайт заблокував інтернет-архів, то всі раніше архівні сторінки з цього домену також негайно стають недоступними. Крім того, в Internet Archive заявили, що "іноді власник сайту зв'язується з нами і просить нас зупинити сканування та архівацію сайту. Ми виконуємо ці запити"<ref>[https://web.archive.org/collections/web/faqs.html#exclusions Some sites are not available because of Robots.txt or other exclusions] {{Webarchivewebarchive |url=https://web.archive.org/web/20110415130934/http://web.archive.org/collections/web/faqs.html |date=April 15, 2011}}</ref>. На додаток, на сайті написано: "Інтернет-архів не зацікавлений у збереженні або наданні доступу до веб-сайту або інших інтернет-документів від осіб, які не хочуть, щоб їх матеріали були в зібранні."<ref>[https://www.archive.org/about/faqs.php#2 How can I remove my site's pages from the Wayback Machine?] {{webarchive |url=https://web.archive.org/web/20140417122600/https://archive.org/about/faqs.php |date=April 17, 2014}}</ref><ref>{{Cite news|url=https://motherboard.vice.com/en_us/article/nekzzq/wayback-machine-deleting-evidence-flexispy|title=The Wayback Machine Is Deleting Evidence of Malware Sold to Stalkers|last=Cox|first=Joseph|date=May 22, 2018|accessdate=May 23, 2018|archiveurl=https://archive.is/20180522192132/https://motherboard.vice.com/en_us/article/nekzzq/wayback-machine-deleting-evidence-flexispy|archivedate=May 23, 2018|deadurl=no}}</ref>