User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
User-agent: tag
Disallow: /tag/
Sitemap: https://gariptavsiye.com/sitemap.xml.gz
Hocam robots.txt dosyanıza girdim ve böyle düzenlemişsiniz robots.txt dosyanızı.
Kodlar yanlış. Heleki alttaki tamamen yanlış olmuş hocam :) altta demişsiniz ki, "tag" botuna /tag/ sayfasını gösterme. tag diye bir bot yok ki :)
wp-adminede disallow vermenize gerek yok hocam. Sitenizde wp-admin sayfasına bir çıkış yok, zaten eklenmemesi ve admin klasörünün yolunun değiştirilmesini tavsiye ederim. admin-ajax.php kısmını neden allow verdiniz onuda anlamadım hocam :)
Size robots.txt dosyanızı aşağıda ki şekilde düzenlemenizi tavsiye ederim, sizin için daha faydalı olacaktır.
User-Agent: *
Allow: /wp-content/uploads/
Disallow: /tag
Sitemap: https://gariptavsiye.com/sitemap.xml.gz
Yukarıdaki kodun tanılamasını yaparsak, User-Agent:* <- Tüm botlara,
allow: /wp-content/uploads/ <- klasörüne erişimi izin ver. (resim dosyalarınız vb. dosyalar için öneririm)
Disallow: /tag <- /tag sayfalarının erişimine ve indekslenmesine izin verme.