Wordpress arşiv sayfalarını arama motorlarından engellemeli miyim?

Yazılarım ve arşivler /sample-post/için WordPress ve URL'ler kullanıyorum /yyyy/mm/.

Google siteyi tamamen dizine ekledi.

Arşivler şu anda tam yayınları görüntülediğinden, Google'ın tüm yayınları içerdiği ve yinelenen içerik olacağı için arşiv sayfalarını dizine eklemesine izin vermemeliyim diye düşündüm. Böylece robots.txt dosyam şunları içerir:

Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/

Bunun iyi bir uygulama olduğunu mu düşünüyorsunuz yoksa sıralamama ve / veya ulaşılabilirliğime zarar verir mi?

Gerçekten de, Wordpress sitenizde yinelenen içerikten kaçınmanız gerekir. Wordpress genellikle kategoriler, arşivler ve etiketler arasında yinelenen içerik oluşturur.

Bu sorunu çözmek için robots.txt dosyasındaki arşiv URL'lerini engelleyebilirsiniz, ancak en iyi seçenek <meta name="robots" content="noindex, follow">bu URL'lerin Google tarafından dizine eklenmesini önlemek için arşiv sayfalarını koymaktır .

Bunu yapmak için Yoast'tan Wordpress SEO eklentisini indirebilirsiniz . Eklenti yüklendiğinde, bu metayu istediğiniz yere koyma seçeneğiniz vardır (arşiv sayfalarında, etiket sayfalarında, kategori sayfalarında ...). Daha sonra eklenti menüsüne gidebilirsiniz: SEO => Başlıklar ve metas .

Kanımca, SEO için en iyi uygulamalar bu metayi arşivler ve etiketler sayfalarına koymak ve Google'ın kategori sayfalarını taramasına izin vermektir. Wordpress sitesindeki bu tür içeriklerden hep kaçındım.