WordPress Multisite yüklemesi için robots.txt nerede saklanır?

9

Google Web Yöneticisi Araçları bunu görebilir, ancak bulamıyorum. Nasıl oluşturulduğu veya dosya yapısı nerede olduğu hakkında bir fikriniz var mı? Dosyayı kökümde göremiyorum. Web sitem http://mikewills.me adresinde ve robots.txt dosya URL'si http://mikewills.me/robots.txt .

Sonunda, Google sitemi dizine eklemiyor ve dizine eklemeye izin vermek için robots.txt dosyasını nasıl düzenleyeceğimizi anlamaya çalışıyorum. Dizine eklemeye izin vermek için gizlilik seçeneğini değiştirdim, ancak bu robots.txt dosyasını güncellemedi.

multisite

— Mike Wills
kaynak

Site bağlantısı? robots.txt, WP ile ilgisi olması muhtemel değildir ...

— Rarst

11

do_robots()Hem action ( do_robotstxt) hem de filter ( robots_txt) içeren fonksiyon tarafından dinamik olarak oluşturulur . robots.txtWordPress kökünüzde bir dosya oluşturursanız, dosya /robots.txtistendiğinde (muhtemelen) sunulur , aksi takdirde işleme WordPress'e geri döner.

Mevcut dosyanız şu şekilde görünüyor:

User-agent: *
Disallow:

Sitemap: http://mikewills.me/sitemaps/mikewills-me.xml.gz

İlk iki ayar, dizine eklenebilir bir blog için uygundur. Yani, Google'ı bu noktada beklemiş olabilirsiniz. Belki sitenizin yeniden değerlendirilmesini istemeniz gerekir .

— Annika Backstrom
kaynak

Bilgi için teşekkürler. Bu varsayım altındaydım. Disallow'u görmekten korktum. Öyleyse bu iyi mi?

— Mike Wills

2

@Mike: Evet, sorun değil. Şimdi söylediğiniz şey: "Hey, User-agenteşleşmeleri *(böylece tüm robotlar), erişemediğiniz sayfaların listesi [empty]." Bu, tüm sayfalara erişebilecekleri anlamına gelir.

— Jan Fabry

Köke robots.txt eklemek işe yaramıyor gibi görünüyor, yine de WordPress tarafından oluşturulan bir tanesine hizmet ediyor. Bir eklenti yüklemeden robots.txt dosyasını eklemenin veya değiştirmenin bir yolu yok mu?

— Nick

3

robots.txt dosyası dinamik olarak oluşturulur. Robots.txt dosyası yok. Bir robot.txt eklentisi yüklemek sorununuzu çözecektir. Bu yardımcı olur umarım

— user1167
kaynak