Merhaba arkadaşlar. Web sitede robots.txt ile bazı engellediğim klasörler içerisinde {ABC} isimli klasör var. Bu klasörün içerisindeki dosyaları başka sayfalar ajax ile çekiyor. Mesela A sayfam {ABC} klasöründeki B dosyamdan site tamamen açıldığında A sayfanın gövdesini yüklüyor hızlı açılması ve scroll aşağı indikçe yüklenmesi için. Webmaster Tools da ki Google gibi getir bölümünde baktığımda Google bot sitenizi böyle görüntülüyor bölümünde web sitemin gövdesinin görünmediğini fark ettim. Uyarılar da da {ABC} isimli klasörün içerisinde ki B dosyasına erişemediğini robots.txt ile engellendiği yazıyor. Acaba {ABC} gibi önemli klasörleri indexlemesine izin vermelimiyim google botun?