Merhabalar arkadaşlar daha önce oluşturmadım böyle bir dosya nasıl oluşturulur diye araştırdım bir kaç şey yaptım fakat google da aratmalarımda hala bir değişiklik olmadı.Hala daha sitemi yazınca altta admin kısmı çıkıyor içindeki js dosyalarının klasörleri çıkıyor, ana dizindeki dosyalar sitenin ismini yazınca çıkıyor.

kodlar aşağıda;

User-agent: *
Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /cookies/
Disallow: /api_cookies/
Disallow: /js/
Disallow: /api_cookies/
Disallow: /tasarim/
Allow: /tasarim/yeni/
User-agent: Googlebot
Disallow: /loqin/
User-agent: Googlebot-Image
Disallow: /loqin/
User-agent: Googlebot-Mobile
Disallow: /loqin/

dosyanın ismini hem robot.txt yaptım hem robots.txt yaptım root ve public_html e attım 2 dosyayıda bir değişiklik olmadı malesef ne yapmak lazım