Google'dan aşağıdaki gibi bir uyarı geldi;
Alıcı: https://**********.com/ web sitesinin yöneticisi,
Akıllı telefonlar için Googlebot, https://bebekhayati.com/ web sitesinde izinsiz erişilemeyen URL'lerin sayısında artış olduğunu tespit etti. Özellikle, bu sayfalar ya mobil cihazlar için bir giriş sayfası sunuyor ya da yasak yanıt kodu (HTTP 403) döndürüyor. Bunun sonucunda, mobil kullanıcılar içeriğinize hiçbir şekilde erişemeyecek ve Google, sayfalarınızı mobil aramada gösteremeyecektir.
Uyarılar aşağıdaki gibidir;
newreply.php?tid=400&load_all_quotes=1
usercp2.php?action=addsubscription&tid=42&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=151&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=507&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=320&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=225&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=418&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
usercp2.php?action=addsubscription&tid=512&my_post_key=65e9ffa9cb295100b8894f1aeb90e36c
Kısacası ben robot.txt dosyamda newreply.php ve usercp2.php'yi disallow yapmama rağmen googlebot nasıl buralara erişmeye çalışıyor.Çözümde aradım yabancı forumlarda ama çözemedim.
Robot.txt dosyamdaki kodlar;
Sitemap: https://bebekhayati.com/sitemap-index.xml
Sitemap: https://bebekhayati.com/misc.php?google_seo_sitemap=index
User-Agent: *
Disallow: /MyBB/captcha.php
Disallow: /MyBB/editpost.php
Disallow: /MyBB/misc.php
Disallow: /MyBB/modcp.php
Disallow: /MyBB/moderation.php
Disallow: /MyBB/newreply.php
Disallow: /MyBB/newthread.php
Disallow: /MyBB/online.php
Disallow: /MyBB/printthread.php
Disallow: /MyBB/private.php
Disallow: /MyBB/ratethread.php
Disallow: /MyBB/report.php
Disallow: /MyBB/reputation.php
Disallow: /MyBB/search.php
Disallow: /MyBB/sendthread.php
Disallow: /MyBB/task.php
Disallow: /MyBB/usercp.php
Disallow: /MyBB/usercp2.php
Disallow: /MyBB/usercp2.php
Disallow: /forum/usercp2.ph
Disallow: /MyBB/calendar.php
Disallow: /MyBB/*action=emailuser*
Disallow: /MyBB/*action=nextnewest*
Disallow: /MyBB/*action=nextoldest*
Disallow: /MyBB/*year=*
Disallow: /MyBB/*action=weekview*
Disallow: /MyBB/*action=nextnewest*
Disallow: /MyBB/*action=nextoldest*
Disallow: /MyBB/*sort=*
Disallow: /MyBB/*order=*
Disallow: /MyBB/*mode=*
Disallow: /MyBB/*datecut=*
Allow: /
Sizce çözümü ne olabilir?