Ali Cevat adlı üyeden alıntı

Engelleyecek bir içeriğiniz yoksa robots.txt dosyası kullanmayınız.
Ayrıca şayet engelleyecek bir içeriğiniz varsa hackerlara yol gösterdiğinden ötürü bunu robots.txt ile değil farklı yöntemlerle yapınız.


Kurduğum wordpress sitesinde çeşitli ayarlamalar yapmaan google'nin sitemi ziyaret etmesini istemiyorum. Fakat verdiğim kodları kaldırdığımda seo ve index açısından bir zarar verip vermediğini malesef anlayamadım sizin düşünceniz nedir.