Merhaba eskolik26

php veya uzantı yapılarını disallow etme veya dizin altı dosya engelleme örnekleri ve açıklamalarına dair iki makale iletiyorum ;

https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt?hl=tr
https://www.mediawiki.org/wiki/Manual:Robots.txt

Saygılarımızla ...