Sizce aşağıdaki robots.txt kullanımı doğru mu ?
Bot'a anlatmak istediğim şu
- Tüm botlar siteyi ziyaret etsin.
- sysadmin yani yönetim panelinin olduğu klasör indexlenmesin.
- linkinde ? olanlar indexlenmesin
- linkinde tours/ olan tüm linkler indexlensin
User-agent: *
Disallow: /sysadmin/
Disallow: /*?
Allow:/tours/