http://www.example.com/robots.txt şeklinde kontrol edin. Dosyanın aşağıdaki şekilde olması gerekir. Değilse dosyayı değiştirmelisiniz.

User-agent: *
Disallow: /