Arkadaşlar Tarama hatası buluyor engellenen url ve sitenin adresi çıkıyor.
Lakin robot.txt yönergelerini yaptım herşey güzel lakin olmadı.
bu hatayı düzeltebilen var mı?
Ek Olarak: Neyse düzelttim beyler. Biraz zaman geçmesi gerekiyormuş.
Gerekli bilgiyi yazıyorum buraya.
Tarayıcımıza sayfalarınıza erişim izni vermek istiyorsanız, bunu diğer robotlara izin vermenize gerek kalmadan da yapabilirsiniz. Yalnızca robots.txt dosyanızın en üstüne şu iki satırlık metni eklemeniz yeterlidir:
User-agent: Mediapartners-Google
Disallow:
Bu değişiklik, tarayıcımızın sitenizin içeriğini dizine eklemesine ve size bu içerikle en alakalı Google reklamlarını sağlamasına olanak tanır.