freewp adlı üyeden alıntı

Botlar için robots.txt ile delay koyabilirsin.

Şu şekilde oluyordu galiba:

User-agent: *
Crawl-delay: 60


Yalnız bu bahsi geçen botlar spam botlar oluyor hocam sizin bu kod arama motorlarının siteyi saniye cinsinden sorgulama aralığını belirtiyor sanıyorum.