hocam örümcek botlarda sorunlar yaşana biliyor robot.txt dosyasınızı düzelmenizi örenirim daha sonra google yeniler. böyle biliyorum ben yanlış ise kusra bakmayın.