Bence manuel robots dosyası oluşturmayın.

http://wordpress.org/extend/plugins/google-sitemap-generator/ Eklentisini kurun hem sitemap işinizi görürsünüz hemde robots.txt dosyasını otomatik oluşturur.