Robot.txt'ye aşağıdakini eklemen yeterli. Allow veya disallow ile belli bir dizine izin verip, engelleyebilirsin. Eğer zaten her dizine izin vermek istiyorsan o kısmı yazman gerekmez.

Yani robot.txt dosyasına şunu yazman yeterli:

User-agent: *
Sitemap: http://teknojan.tk/sitemap.xml.gz