Özelden de yazdığım gibi, cache, cdn gibi eklentilerin ayrıca robot.txt dosyası oluşturup oluşturmadıklarına eklenti klasörlerinden bakın, bir eklenti yukarıda saydıklarım dışında robot.txt oluşturup engelliyor olabilir.