deviL adlı üyeden alıntı

Peki önlemini nasıl alabiliriz? Sanırım sayfalamayı indexletmemek için robots.txt ye kod eklemek gerekli.


Tek tek veya neden kaynaklanıyorsa one göre bir önlem alınabilir. Robots.txt bunlardan birinin örneğidir. Mesala pagenavi, feed uzantıları duplicate content yapabiliyor wordpress de.

Benim sitemdeki robots.txt örnek alabilirsiniz.