User-agent: *
Allow: /
Disallow: /search/label/
Sitemap: http://www. örnek.com/sitemap.xml
Mesela buradaki gibi etiket sayfalarını engelletmek yeterli olur mu? Yoksa önerebileceğiniz bir robot.txt var mı?
User-agent: *
Allow: /
Disallow: /search/label/
Sitemap: http://www. örnek.com/sitemap.xml
Mesela buradaki gibi etiket sayfalarını engelletmek yeterli olur mu? Yoksa önerebileceğiniz bir robot.txt var mı?