Robots.txt aracından güncel robots.txt dosyasını tekrar gönderince sorun ortadan kalmakmaktadır. Aynı sorunu yaşacak olan arkadaşlar için kısa bir bilgi olsun