Hocam genel mantık şu;
- Taranmayacak yerler
- Taranacak veriler
- Site haritası

gibi şeylerin belirtilmesi kafi.