Not : Bu cevap giderek güncelliğini yitirmiştir.
İnternet Arşivi'nin web koleksiyonuna en büyük katkısı Alexa İnternet olmuştur. Alexa'nın amaçları doğrultusunda taradığı materyal birkaç ay sonra IA'ya bağışlandı. Soruda belirtilen izin verme kuralının eklenmesi bu taramaları etkilemez, ancak Wayback onları 'geriye dönük olarak' onurlandırır (erişimi reddetmek, malzeme hala arşivde olacaktır - malzemenizi gerçekten dışarıda tutmak istiyorsanız Alexa'nın robotunu hariç tutmalısınız İnternet Arşivinin).
Alexa'nın taramalarını etkilemenin yolları olabilir, ancak buna aşina değilim.
IA kendi tarayıcısını (Heritrix) geliştirdiğinden, kendi taramalarını yapmaya başladılar, ancak bunlar hedefli taramalar yapıyorlar (Kongre Kütüphanesi için seçim taramaları yapıyorlar ve Fransa ve Avustralya için ulusal taramalar yapıyorlar). Google ve Alexa'nın yürüttüğü sürekli dünya ölçeğinde tarama yapmıyorlar. IA'nın en büyük taraması, 2 milyar sayfayı taramak için özel bir projeydi.
Bu tarar proje belirli faktörlerden kaynaklanan programları üzerinde işletilen olarak, sitenizi ziyaret veya ne sıklıkta etkileyemez eğer sitenizi ziyaret.
IA'nın sitenizi nasıl ve ne zaman taradığını doğrudan etkilemenin tek yolu Archive-It hizmetini kullanmaktır. Bu hizmet, özel taramalar belirlemenize olanak tanır. Sonuçta elde edilen veriler (sonunda) IA'nın web koleksiyonuna dahil edilecektir. Ancak bu ücretli bir abonelik hizmetidir.