robots.txt dosyasının amacı nedir? |
7 Mesajlar | 1.032 Okunma | ||
- Üyelik 19.04.2013
- Yaş/Cinsiyet 33 / E
- Meslek öğrenci
- Konum İstanbul Avrupa
- Ad Soyad F** A**
- Mesajlar 444
- Beğeniler 124 / 16
- Ticaret 3, (%67)
selam arkadaşlar bu dosyanın amacı nedir bir araştırma yaptım hangisinin taranıp hangisinin taranmıycağını belirtmek için deniliyordu bunu anladım ama sitemap.xml urlsini disallow olarak gösteriyor bu disalow taranmasına engel deilmi sitemapın yani sitemapın taranmaması zarar dokundururmu siteme? burayı anlayamadım kısacası neden sitemap disallow
her zaman eksik yazarım eksiklerimi yanlış sanmanız ve bana cevap vermeniz için
- Üyelik 03.08.2013
- Yaş/Cinsiyet 38 / E
- Meslek Yazılım Mühendisi
- Konum İstanbul Avrupa
- Ad Soyad ** **
- Mesajlar 709
- Beğeniler 24 / 190
- Ticaret 19, (%100)
Örnek vereyim;
Sitemap disallow olarak ayarlanmışsa, onu allow şeklinde düzeltin.
User-agent: *
Allow: /
# Tümüne izin verir, tarar ve dizine ekler.Disallow: /dosya
Disallow: /dosya-1
Disallow:www.site.com/engellenenurl.html
# Belirlenen dosyaları tarar ancak dizine eklemez.
Sitemap:www.siteadi.com/sitemap.xml
# Site haritasının yolunu belirler.Sitemap disallow olarak ayarlanmışsa, onu allow şeklinde düzeltin.
- Üyelik 19.04.2013
- Yaş/Cinsiyet 33 / E
- Meslek öğrenci
- Konum İstanbul Avrupa
- Ad Soyad F** A**
- Mesajlar 444
- Beğeniler 124 / 16
- Ticaret 3, (%67)
anladım tşkrler peki neden seo hocasında önerilen olarak disallow yazıyor onu anlayamadım
benim robot.txt böyle dissallow bulunmuyor sanırım sitemap disallow deil
benim robot.txt böyle dissallow bulunmuyor sanırım sitemap disallow deil
Sitemap: http://www.psisik.org/sitemap.xml
User-agent: Googlebot
Disallow: /blog
Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /feed/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
Disallow: /page/
Disallow: /tag/
Disallow: /category/
User-agent: Googlebot-Image
Disallow: /wp-includes/
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /
her zaman eksik yazarım eksiklerimi yanlış sanmanız ve bana cevap vermeniz için
- Üyelik 03.08.2013
- Yaş/Cinsiyet 38 / E
- Meslek Yazılım Mühendisi
- Konum İstanbul Avrupa
- Ad Soyad ** **
- Mesajlar 709
- Beğeniler 24 / 190
- Ticaret 19, (%100)
Şunu kullan;
User-agent: *
Allow: /
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /comments/
Disallow: /show-error-*
Disallow: /*?
Disallow: /xmlrpc.php
Disallow: /trackback/
Disallow: /comment-page-
User-agent: Mediapartners-Google
Allow: /
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Image
Allow: /
User-agent: Googlebot-Mobile
Allow: /
# Site haritalari
Sitemap: http://www.site.com/sitemap.xml 
- Üyelik 19.04.2013
- Yaş/Cinsiyet 33 / E
- Meslek öğrenci
- Konum İstanbul Avrupa
- Ad Soyad F** A**
- Mesajlar 444
- Beğeniler 124 / 16
- Ticaret 3, (%67)
tmm değiştiriyorum allow'lara klasör eklemelimiyim yoksa olduğu gibimi yapıştırim
her zaman eksik yazarım eksiklerimi yanlış sanmanız ve bana cevap vermeniz için
- Üyelik 03.08.2013
- Yaş/Cinsiyet 38 / E
- Meslek Yazılım Mühendisi
- Konum İstanbul Avrupa
- Ad Soyad ** **
- Mesajlar 709
- Beğeniler 24 / 190
- Ticaret 19, (%100)
Wordpress kullanıyorsan olduğu gibi kullan.
Konuyu toplam 3 kişi okuyor. (0 kullanıcı ve 3 misafir)