robot dosyasıyla alakalı olduğunu sanmam bot zaten siteye giriyor url leri tarayamıyor bu yüzden hata veriyor. 2-3 gün sonra tarıyor. bendeki durum bu bak 37 tane engellemiş sonra taramış.