vaveyla adlı üyeden alıntı

Googlenin suçu yok burda google'nin robots.txt hakkında yaptığı güncellemeden habersiz kalmışsınız hocam.

2 Temmuz itibariyle robots.txt dosyasında noindex geçerli olmayacak.

https://www.optimisthub.com/google-robots-txt-dosyalarini-artik-desteklemeyecek-mi.html


Eyw hocam habersiz kaldık orada haklısınız. Google'nin çok büyük bir suçu var. Ben bu bilgiye googlenin kendi dökümanından ulaştım. Madem böyle bir değişikliğe gitti dökümanını neden güncellemedi. Onu geçtim görmesini istemediğim sayfalarda noindex işaretli sitemaptada linkler yok hala neden tarama yapmaya çalışıyor. Hadi yaptın bana bunu gelipte hata diye sunma madem. Kızdığım nokta bu.