Ben google örümceklerini takip ediyorum. Galiba Anasayfayı indexleyen bot ayrı kategori indexleyen etiketleri teker teker indexleyen, resimleri indexleyen bot ayrı diye tahmin ediyorum. Bu sadece bi tahmin sıklıkla karşılaştığım sorundu benimde botları takip ettiğimde bu sonuçla karşılaştım.