jobsfrominternet adlı üyeden alıntı
Robot.txt yi her şeyi indexleyecek şekilde yaparsak çözülüyor mu peki?Fikri olan yazsın lütfen bir sürü insan var bu sorunu çözemeyen.
robot.txt her şeye izin verdikden sonra zaten böyle bir hata verilmemesi lazım bildigim kadarı ile eyer engellenirse ise engellendigi halde indexlendi diye uyarı verir mantiken
indexlenmesin diye google botları engellenmiş ama google botu dinlemeyip indexlemiş ortada aslında sorun yok izin verin herşeye düzelsin sorun