@adlbelge hocam güncelleme kendi mi geliyor acaba
Google web masters toolsa girip robots dosyasını gönder diyerek hemen yenileyebilirsiniz. Ancak bunun sonuçlara yansıması 1 haftayı bulabilir.
Bunun için robots soyasını gönderdiğiniz sayfada yer alan test kısmını ilgili sayfanız için kullanın. Eğer gönderdiğiniz sayfaya izin verildi diyorsa sorun yok ama engellendi diyorsa (robots.txt güncellediğiniz halde) sorun robots dosyanızda demektir.
Ancak robots dosyasını gödnerdikten sonra sayfayı yenileyin hatta tekrar çıkıp giriş yapın. Sonra tekrar test edin.
Saygılar