gregarius artık geliştirilmiyor, öntanımlı olarak arama motorlarına da kapalı
ftp'den veya cpanel'den giriş yapıp public_html içerisindeki robots.txt dosyasını silmen yeterli KadirHameş

Ek Olarak:
User-agent: *
Disallow: /