User-agent: *

Allow: /

Disallow: /search/label/

Sitemap: http://www. örnek.com/sitemap.xml

 

Mesela buradaki gibi etiket sayfalarını engelletmek yeterli olur mu? Yoksa önerebileceğiniz bir robot.txt var mı?