baborg adlı üyeden alıntı

Dostum robot.txt kullan. Arşivi indexlemesini engelle. Bir sitemap oluştur.


Arşive dosyasını robots.txt dosyasından engellerim o sorun değil hocamda şimdi eğer engeller isem bu indexlerden bana gelen ziyaretçileride engellemiş oluyorum yani arama sonuçlarında bu url'lere denk gelen kişide hata alacak giremeyecek siteye.