kozmikG robots.txt dosyasına aşağıdaki kodu ekleyerek indekslenmesini engelleyebilirsiniz. Bu kodu kullandığınız sürede siteniz webmaster toolsa ekli olsa da indekslenmez. Zaten bu kodu kullandığınız da, sitenize bot geldiğinde webmaster tools üzerinde indekslenmesi engelleniyor diye size uyarı mesajı verecektir.
User-agent: *
Disallow: /