lostyazilim

Robots.txt Hakkında (Bilgisi olanlar okuyabilir mi? )

6 Mesajlar 1.151 Okunma
lstbozum
wmaraci reklam

hasanayt hasanayt Ogreniyor.php Kullanıcı
  • Üyelik 01.11.2014
  • Yaş/Cinsiyet 27 / E
  • Meslek Makine T.
  • Konum Kocaeli
  • Ad Soyad H** A**
  • Mesajlar 879
  • Beğeniler 126 / 125
  • Ticaret 6, (%100)

 

 

wmaraci
reklam

profdizayn profdizayn Paylaşmayı seven. Kullanıcı
  • Üyelik 21.03.2016
  • Yaş/Cinsiyet 35 / E
  • Meslek Patron.
  • Konum İstanbul Avrupa
  • Ad Soyad A** Z**
  • Mesajlar 378
  • Beğeniler 151 / 107
  • Ticaret 14, (%93)
Disallow: / dan sonra gelen her dizini, google engeller o dizinler link alamaz. Googlede yayınlanmaz. Benim anlamadığım bu robots.txt'nin hali nedir? neden bu kadar çok engelleme yaptın?
 

 

mkarson mkarson Web Dev. - Sec. Expert Kullanıcı
  • Üyelik 20.06.2016
  • Yaş/Cinsiyet 31 / E
  • Meslek Web Developer - Security Exp.
  • Konum İstanbul Anadolu
  • Ad Soyad M** K**
  • Mesajlar 196
  • Beğeniler 0 / 88
  • Ticaret 11, (%100)
disallow sayesinde verdiğiniz dosyaya botlar erişemiyor olay bundan ibaret :D
Bunu genelde şunun için yapıyorlar atıyorum bir dizininizi botlar ziyaret etmesin içeriğini indexlemesin diye v.s :D
Ek : Dosya isimlerinden anladığım kadarıyla forum scripti kullanıyorsun büyük ihtimalde vbulletin :D
 

 

hasanayt hasanayt Ogreniyor.php Kullanıcı
  • Üyelik 01.11.2014
  • Yaş/Cinsiyet 27 / E
  • Meslek Makine T.
  • Konum Kocaeli
  • Ad Soyad H** A**
  • Mesajlar 879
  • Beğeniler 126 / 125
  • Ticaret 6, (%100)

profdizayn adlı üyeden alıntı

Disallow: / dan sonra gelen her dizini, google engeller o dizinler link alamaz. Googlede yayınlanmaz. Benim anlamadığım bu robots.txt'nin hali nedir? neden bu kadar çok engelleme yaptın?


Hocam öncelik ile belirtmek isterim ki robots.txt dosyasında hiç bir engelleme yapmadım ben hazır bir forum(mybb) teması aldım ?

Siz böyle deyince aklımda soru işaretleri oldu ?

-Neden bu kadar engelleme var ?
-Engelleme sebepleri ne olabilir ?
-Eğer bu engellemeleri kaldırırsam ne olur ? gibi

mkarson bilgileriniz için teşekkürler, şimdi üste yazdıklarımı merak ediyorum
 

 

wmaraci
wmaraci

profdizayn profdizayn Paylaşmayı seven. Kullanıcı
  • Üyelik 21.03.2016
  • Yaş/Cinsiyet 35 / E
  • Meslek Patron.
  • Konum İstanbul Avrupa
  • Ad Soyad A** Z**
  • Mesajlar 378
  • Beğeniler 151 / 107
  • Ticaret 14, (%93)
Dostum mybb nin nasıl bir alt yapısı var bilmiyorum. Yani mybb'nin tüm .php dosyalarını google indexliyomuki bu kadar dosya engellemiş onu anlamadım açıkcası. Tavsiyem ünlü bir mybb forumu kullanan siteyi bul örneğin destek siteleri, onların site.com/robost.txt yaparak bi bak bakalım onlar nasıl yapmışlar. Farklı ise onlarınkini kopyala kendininkine, daha sonra search conseleden robots.txt tekrar gönder. Tahminimce 1-2 günde o çıkan uyarı kalkacaktır.
 

 

hasanayt hasanayt Ogreniyor.php Kullanıcı
  • Üyelik 01.11.2014
  • Yaş/Cinsiyet 27 / E
  • Meslek Makine T.
  • Konum Kocaeli
  • Ad Soyad H** A**
  • Mesajlar 879
  • Beğeniler 126 / 125
  • Ticaret 6, (%100)
profdizayn Örnek olarak bunu gördüm
http://mybbdepo.com/robots.txt ( sende bakarak karşılaştırabilirsin fikir alış verişi yaparız bendemi yapsam acep :) )
 

 

wmaraci
Konuyu toplam 7 kişi okuyor. (0 kullanıcı ve 7 misafir)
Site Ayarları
  • Tema Seçeneği
  • Site Sesleri
  • Bildirimler
  • Özel Mesaj Al