Ne zaman olduğunu hatırlayamadığım, çok sonralar yani şu sıralar kurcalarken denk geldiğim Wordpress sitem için Robots.txt sorunsalını paylaşmak isterim.
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-includes/
Allow: /wp-includes/js/
Allow: /wp-includes/images/
Disallow: /trackback/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author/
Disallow: /sld/
Disallow: /embed-link/
Hali hazırda robots.txt ayarlamalarım bu şekildeymiş ama ne zaman nasıl neden yaptım hiç haberim yok ya da unuttum. Burada ters giden bir şey var sanırım. Yanlış olan "wp-includes" olduğunu düşünüyorum. Burada Disallow olanlardan güvenlik açısından sıkıntı çıkartabilecek olmayanlar hangisidir. Yardımcı olur musunuz? Google indeximi etkiliyor sanırım. Emin olmadan kaldırmak istemedim.
Şimdide teşekkür ederim.