robots.txt doğru ayarlandıysa zararlı dğeil aksine oldukça yararlıdır. Sizin robots.txt komutlarınız da tam olması gerektiği gibi. Google'ın sitenize uğramamasının nedeni banlanmanız olabilir. Banlı olmadığına eminseniz Site yöneticisi araçlarına sitenizi ekleyip googlebot gibi taramayı vs. deneyin