Eklerseniz sizin için iyi olur birçok örnek robots txt bulabilirsiniz.