Robots.txt kod yapısı var ama ftp'de göremiyorsanız eğer, @HiO arkadaşımızın sitesinde olduğu gibi, kullanılan sistemin kodları arasına gömülmüş olabilir. Site ayarlarınızı kontrol ediniz, belki sizin düzenleyebilmeniz için bir bölüm oluşturulmuştur.




Bu konu içerisinde önceki mesajlarda bir arkadaşımız tarafından paylaşılmıştı. Bu konuda yada farklı bir konuda, kafa karışıklığına sebebiyet vermemesi açısından, daha önceki tüm mesajları tek tek okumanızı tavsiye ederim. Belki bu konuda değil ama aynı şeyleri farklı şekilde paylaşmak, bazen yardım isteyen kişilerin kafalarının karışmasına sebebiyet verebiliyor.