Sadece URL kaldır'dan kaldırırsanız, botlar sitenizi ziyaret ettiğinde tekrardan aynı dizinleri index'ler. Kalıcı çözüm için Robots.txt'den ilgili dizinlere disallow yetkisi vermelisiniz.