lostyazilim
tr.link

Robots.txt Nedir? Nasıl Kullanılır?

17 Mesajlar 4.084 Okunma
acebozum
tr.link

techvadi techvadi Üyeliği Durdurulmuş Banlı Kullanıcı
  • Üyelik 07.03.2012
  • Yaş/Cinsiyet 31 / E
  • Meslek Web Design
  • Konum İstanbul Anadolu
  • Ad Soyad Ç** B**
  • Mesajlar 612
  • Beğeniler 118 / 75
  • Ticaret 3, (%67)
:) sitemde bulunuyor http://www.techvadi.org/robots.txt
 

 

wmaraci
webimgo

digidukkan digidukkan WM Aracı Kullanıcı
  • Üyelik 26.01.2012
  • Yaş/Cinsiyet 35 / E
  • Meslek Meslek
  • Konum Diğer
  • Ad Soyad A** K**
  • Mesajlar 1194
  • Beğeniler 1 / 269
  • Ticaret 5, (%100)
peki HTTrack gibi teleport programlarına karşı nasıl kapatırız sitemizi? bu tür teleport programları örümcek kullanarak siteyi indiriyor bildiğim kadarıyla. ben aşağıdakileri kullandım ama bir işe yaradıkları yok.


User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: HTTrack
Disallow: /
 

 

independence independence WM Aracı Kullanıcı
  • Üyelik 02.04.2012
  • Yaş/Cinsiyet 52 / E
  • Meslek Bilgisayar Programciligi
  • Konum
  • Ad Soyad B** E**
  • Mesajlar 72
  • Beğeniler 2 / 5
  • Ticaret 17, (%100)

mozkaradas adlı üyeden alıntı

peki HTTrack gibi teleport programlarına karşı nasıl kapatırız sitemizi? bu tür teleport programları örümcek kullanarak siteyi indiriyor bildiğim kadarıyla. ben aşağıdakileri kullandım ama bir işe yaradıkları yok.


User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: HTTrack
Disallow: /


Kapatamazsiniz.
 

 

techvadi techvadi Üyeliği Durdurulmuş Banlı Kullanıcı
  • Üyelik 07.03.2012
  • Yaş/Cinsiyet 31 / E
  • Meslek Web Design
  • Konum İstanbul Anadolu
  • Ad Soyad Ç** B**
  • Mesajlar 612
  • Beğeniler 118 / 75
  • Ticaret 3, (%67)
kapatamazsın diye biliyorum
 

 

wmaraci
wmaraci

digidukkan digidukkan WM Aracı Kullanıcı
  • Üyelik 26.01.2012
  • Yaş/Cinsiyet 35 / E
  • Meslek Meslek
  • Konum Diğer
  • Ad Soyad A** K**
  • Mesajlar 1194
  • Beğeniler 1 / 269
  • Ticaret 5, (%100)
kapatılabiliyor ama ben nasıl kapatacağımı bulamadım. themeforest.net'deki bir çok site indirilemiyor.
 

 

sanat07 sanat07 WM Aracı Kullanıcı
  • Üyelik 26.10.2012
  • Yaş/Cinsiyet 43 / E
  • Meslek memur
  • Konum Antalya
  • Ad Soyad ** **
  • Mesajlar 108
  • Beğeniler 5 / 5
  • Ticaret 0, (%0)
Aşağıdaki benik robots.txt dosyam bu dosyaya benim bildiğim ve okuduğum kadarıyla googlenin indekslenmeyeceği yerler girilmiyormu sitemap.xml nin falan ne işi var burda ben anlamadım tamam başında disallow yok ama yinede neden buraya giriyor geçen girdiğmde ise başka bişey yazıyordu bu sürekli neden değişiyor.

Siteismi görnektir gerisi doğaldır.


User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://www.sistem.com/sitemapindex.xml

Sitemap: http://www.sistem.com/sitemap.xml.gz
 

 

BAHİSSİSTEM Spor Toto

tornado48 tornado48 WM Aracı Kullanıcı
  • Üyelik 15.02.2012
  • Yaş/Cinsiyet - / E
  • Meslek Öğretmen
  • Konum
  • Ad Soyad ** **
  • Mesajlar 102
  • Beğeniler 6 / 11
  • Ticaret 2, (%100)
Konuyla ilgili detaylı bilgiyi buradan alabilirsiniz.
 

 

Aradığın blogsa işte sana Blogsa...
wmaraci
wmaraci
Konuyu toplam 1 kişi okuyor. (0 kullanıcı ve 1 misafir)
Site Ayarları
  • Tema Seçeneği
  • Site Sesleri
  • Bildirimler
  • Özel Mesaj Al