http://yardim.yandex.com.tr/webmaster/controlling-robot/robots-txt.xml
Bu bölümden Robot TXT dosyasını istenildiği şekilde düzenleyebilir misin ?
https://support.google.com/blogger/answer/2472627?hl=tr sayfasında Blogger Robots TXT'nin nasıl/nereden düzenleneceğini görebilirsin.
Aşağıdaki şekilde bir Robots.TXT işine yarayacaktır.
User-agent: *
Disallow: /indexlenmeyecek sayfa => Bu bölüm sitende robotların ziyaret etmesini istemediğin sayfa varsa onun içindir. Silebilirsin.
Host: http://www.apk-paylas.blogspot.com
Sitemap: http://www.apk-paylas.blogspot.com/sitemap.xml
