Bu gelen botları nasıl engelleyebilirim acaba ?
Aşağıda .htaccess içini ekliyorum. linguee sitesini, google ve spide.yandex.com engellemek için yazdım ama doğru mu, bilen arkadaşların desteği ricasıyla.
RewriteEngine On
Options +FollowSymlinks
Deny from 217.172.189.0/24
Deny from 93.158.166.0/24
Deny from 66.249.73.0/24
Allow from all
RewriteEngine On
Options +FollowSymlinks
RewriteCond %{HTTP_USER_AGENT} Baiduspider [NC]
RewriteRule .* – [F,L]