Drowsman adlı üyeden alıntı

User-agent: *
Allow: /

Sitemap: http://www.siteismi.com/sitemap.xml

Bu şekilde yapıldıgında bütün herşeyi indexliyor

eyer indexlemesin istiyorsanız

User-agent: Googlebot
Disallow: /nogooglebot/ şeklindedir