User-agent: *
Allow: /

Bu kod kullanıldığında sitede ne var ne yok indexler. Bu yararlı mı ! elbette yararlı size trafik sağlar lakin doğru trafik mi ! Hayır doğru trafik sağlamaz ve gereksiz band yeme nedeni olacaktır. Konudaki ilk ayarlar en uygun ayarlardır ( Benim düşüncem )