Önerim "sitemap" üzerinden veri almayı aktifleştirmenizdir. Böylece onayladığınız bir sitenin geri kalan uzantılarını (abc.com --> abc.com/konu gibi) daha çabuk çekebilirsiniz.
Onun dışında güzel bir proje. Başarılar diliyorum.