Evet, asıl sorun burada zaten. :) k/ ile başlayan 5 farklı kategori, haber- ile başlayan +2500 içerik var. :/
User-agent: *
Disallow: /k/
bu kod kategori ve içindekileri engeller de ama sitemap varsa direk haber linklerini indeksler, verdiğim öbür kod var ya onu kullanırsanız iki taraflı engelleme yapar hem haber ile başlayan hem kategori ve içindekileri.
Siz haber- ile başlayanların da mı indekslenmesini istemiyormusunuz? yoksa sadece o 5 kategorideki haber- ile başlayanlar?