«baidu» etiketlenmiş sorular

Ziyaretlerimin çoğu baidu örümceklerinden. Arama motorlarına hiç yardımcı olmadığını düşünmüyorum, bu yüzden onları nasıl engelleyeceğinizi düşünüyorum. Bu iptables ile yapılabilir mi? Web sunucum olarak nginx kullanıyorum.

15 traffic  nginx  web-crawlers  baidu 

Apache günlüğümü kontrol ederken baidu'nun son 2 hafta boyunca günde 10 kez web sitemi taradığını görebiliyorum. Bunu çok önemsediğimden değil, ama neden bunu yaptığını gerçekten merak ediyorum. Çok küçük gelen bir web sitesi. Bunun arkasında herhangi bir sebep var mı? 220.181.108.169 [10/Mar/2012:10:41:29 +0100] "GET / ... +http://www.baidu.com/search/spider.html)" 180.76.5.197 [10/Mar/2012:11:02:02 +0100] …

12 seo  web-crawlers  baidu