aynı içeriği iki farklı URL'de görme sıkıntısı özetle şöyle;

www.siteadi.com/123/ABC.html
ile
www.siteadi.com/123/XYZ.html

sayfalarındaki başlıktan etiketlere resimlerle beraber tüm içeriğin aynı olması durumunda sıkıntı yaşanacaktır. Konuyla alakalı "canonical url" etiketini araştırabilirsin.

Tavsiyem robots.txt dosyanda kesinlikle ansayfayı engelleme, sen zaten özgün içerik giriyorsan kopya kourkusu yaşamana gerek kalmaz.