Allow: / ekleyin belki işe yarar.
Bu robots.txt elle oluşuturup ftp'ye atmam gerekiyor mu ? Çünkü ftp'de yok.Eğer atmam gerekmiyorsa bunun düzenlemesini nerden yapabilirim ? Allow:/ eklerken değer'de yazan şeyleri mi yazmalıyım yoksa site haritası dediği şeyleri mi ?