Giriş Yap / Kayıt Ol

WM Aracı'na üyelikler tekrar açıldı! Kayıt olmak için TIKLAYIN!


8Beğeni
  • 6 Yazan CoaX
  • 1 Yazan enerjiveguc
  • 1 Yazan Mikserci

Cevap Yaz Favorilerime Ekle
Seçenekler Stil
Geri Git   Forum > > WordPress

Robots.txt nedir? Nasıl kullanılır? Seo (2019)

  #1  
Okunmamış 20 Nisan 2019, 18:50
CoaX Adlı Üyenin Avatarı
AmeleMaster
 
Üyelik Tarihi: 04 Mayıs 2013
Yaş / Cinsiyet: 34 / Erkek
Meslek: CoaXSEO
Ad, Soyad: Me... Pa...
Mesajlar: 1.014
Beğeniler: 614 / 207
Ticaret: 6, 100%
Robots.txt nedir?

Sitenin ana dizininde (kök dizini) bulunmaktadır.
Çalışması bunun dışında olmamaktadır. ( www.siteadresi.com/robots.txt )
Kullanılmasının en yaygın amacı google sıralamalarında görünmesini engelleme, indexlenmesini engelleme, hariç tutmaktır.

Nasıl kullanılır?

User-agent:
Bu satır bir başlangıç kuralını belirtir. Yani hedeflenen GoogleBot ise aşağısına taranmalı ve taranmamalı olarak yollar eklenir.
Örnek kullanım:
User-agent: GoogleBot
Disallow:
Allow: /wp-content/uploads/

User-agent: *
Eğer yıldız işareti bırakırsanız altına ise Disallow: satırını boş bırakar yazarsanız. siteniz tüm arama motorları tarafından taranmaz halde olacaktır.
Allow: / olarak eklerseniz bütün botların sitenizi görüp taramasına izin vemriş olursunuz.
İdeal kullanımı:
User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-admin/
Bu şekilde kullanıp taranmasını ve taranmamasını isteyeceğimiz yolları belirtmektir.

Disallow nedir?
Arama motorlarına taranmamasını istediğimiz yolları belirtir.
Örnek kullanım:
Disallow: /wp-includes/js/

Allow nedir?
Arama motorlarına taranmalı diyebileceğimiz yolları belirtir.
Örnek kullanım:
Allow: /wp-content/uploads/


Robots.txt - header.php Kullanımı

Sitenin google tarafından taranmaması için aşağıda kod header.php ye eklenir.
<meta name="googlebot" content="noindex" />

Botlar gelmesine izin verilen bir koddur.Fakat indexlenmesi istenmediği anlamına gelir.
<meta name=”robots” content=”noindex, follow” />


Search Konsolunuzda "noindex" hata sayfaları alıyorsanız header.php de meta tagınızda noindex varlığına bakınız. "noindex" hatalarını eğer konsolunuzda etiket sayfalarınızın olduğunu görüyorsanız düzeltilmesini isteyin.

Robotx.txt dosyanıza mutlaka site haritanızı ekleyin.
Örnek ekleme şu şekilde olmalı:
Sitemap: http://www.siteadresim.com/sitemap_index.xml

Birden çok site haritasını robotx.txt ekleyebilir miyim? - Evet
Birden çok site haritasını search konsola ekleyebilir miyim? - Evet
Birden çok robotx.txt kullanabilir miyim? - Hayır
header.php de yukarıda belirtilen meta tagını kullanmam zorunlu mudur? - Hayır


Sitemap: http://www.google.com/ping?sitemap=h...emap_index.xml
Bu verdiğim linki kendinize göre düzenleyin ve yeni bir sekmede açın.
Site Haritası Bildirimi Alındı. yazısını okudunuz mu?
Öyleyse robots.txt dosyasına eklersem bu pinglemenin bana faydası olabilir.


Örnek bir Robots.txt Kullanımı

Bir çok kişi örnek bir robotx.txt dosyası nasıl olmalıdır diye araştırmalar yapıyor, destek konuları açıyor. Bununla birlikte robots.txt dosyasını seo açısında önemli hale getirmek düşünceleri var olmaktadır.

Google botlarını tek tek yazarak sitemin taranmasını istersem şöyle yapmalıyım.

User-agent: Googlebot-Mobile
Allow: /wp-content/uploads/

User-agent: Twitterbot
Allow: /wp-content/uploads/

User-agent: Googlebot-Image
Allow: /wp-content/uploads/

User-agent: Mediapartners-Google*
Allow: /wp-content/uploads/

User-agent: Adsbot-Google
Allow: /wp-content/uploads/


Şunları da altına yazarım. Bunları tarama indexleme derim.

Disallow: /wp-content/plugins/
Disallow: /wp-content/cache
Disallow: /wp-includes/js

Site haritalarını da altına ekleyebilirim.

Sitemap: https://www.siteadresi.com/sitemap_index.xml
Sitemap: http://www.google.com/ping?sitemap=h...emap_index.xml

Önemli
Search Console eski sürümünde robots.txt bölümünde hata varmı yok mu kesin bakın.
Genel de sadece allow ya da sadece disallow eklenerek alınan hatalar vardır.
Mutlaka hem disallow hem de allow kullanın.
Didimedya, gfo, enerjiveguc ve 3 kişi daha bunu beğendi.
Konu CoaX tarafından (25 Haziran 2019, 20:50 ) değiştirilmiştir. Sebep: Konu içeriği düzenlendi.
~ CoaXSEO

Yol odur ki doğruya varır. Dağı, tepesi, karı, kışı olmaz.
Göz odur ki hakkı görür. Er dediğinse alçakta durur.
Yüceden bakan göz ise göz değildir.
  #2  
Okunmamış 20 Mayıs 2019, 15:41
Avatar Seçilmemiş
WM Aracı
 
Üyelik Tarihi: 29 Eylül 2011
Cinsiyet: Erkek
Meslek: öğrenci
Konum: Manisa
Ad, Soyad: Mu... Ka...
Mesajlar: 599
Beğeniler: 106 / 47
Ticaret: 1, 100%
CoaX tarayıcıya robots.txt eklediğimde robots.txt var fakat kök dizinde göremiyorum gizli olarak mı kalıyor bu dosya
  #3  
Okunmamış 20 Mayıs 2019, 15:48
enerjiveguc Adlı Üyenin Avatarı
Street Engineer
 
Üyelik Tarihi: 28 Mayıs 2018
Yaş / Cinsiyet: 47 / Erkek
Ad, Soyad: Be... Ak...
Mesajlar: 2.749
Beğeniler: 1061 / 589
Ticaret: 0, 0%
Alıntı:
silenthilll Adlı Üyeden Alıntı
CoaX tarayıcıya robots.txt eklediğimde robots.txt var fakat kök dizinde göremiyorum gizli olarak mı kalıyor bu dosya
İlginç, robots.txt Gizli kalmaz. Sorguyu görebileceğimiz bir ekran görüntüsü koymayı deneyin.
  #4  
Okunmamış 20 Mayıs 2019, 15:53
Avatar Seçilmemiş
WM Aracı
 
Üyelik Tarihi: 29 Eylül 2011
Cinsiyet: Erkek
Meslek: öğrenci
Konum: Manisa
Ad, Soyad: Mu... Ka...
Mesajlar: 599
Beğeniler: 106 / 47
Ticaret: 1, 100%
enerjiveguc wordpress kurulurken kendi oluşturduğu robots.txt gözükmüyordu fakat tarayıca siteadi.com/robots.txt yazdığımda vardı ve gözüküyordu şimdi kendim robots.txt oluşturup attım şu an kökdizinde de gözüküyor
  #5  
Okunmamış 20 Mayıs 2019, 15:56
enerjiveguc Adlı Üyenin Avatarı
Street Engineer
 
Üyelik Tarihi: 28 Mayıs 2018
Yaş / Cinsiyet: 47 / Erkek
Ad, Soyad: Be... Ak...
Mesajlar: 2.749
Beğeniler: 1061 / 589
Ticaret: 0, 0%
Alıntı:
silenthilll Adlı Üyeden Alıntı
enerjiveguc wordpress kurulurken kendi oluşturduğu robots.txt gözükmüyordu fakat tarayıca siteadi.com/robots.txt yazdığımda vardı ve gözüküyordu şimdi kendim robots.txt oluşturup attım şu an kökdizinde de gözüküyor
Sistem kendi içeriisnde oluşturmuş olabilir, bunlar genellikle cPanel yada Plesk te Wordpress yüklemesi aşamasında yapılabiliyor.Ama doğruluğuna "ben" pek itibar etmeyip kendim hazırlamayı tercih ediyorum. Başınıza geldiği gibi görünmeye biliyor, yada olması gerektiği konumda olmayabiliyor.

Bu nedenle manuel olarak hazırlayıp sunucuya atmak en garanti ve doğru yoludur...
silenthilll bunu beğendi.
  #6  
Okunmamış 06 Haziran 2019, 13:52
Mikserci Adlı Üyenin Avatarı
https://eksenhaber.com
 
Üyelik Tarihi: 22 Mayıs 2019
Yaş / Cinsiyet: 34 / Erkek
Meslek: Şoför
Ad, Soyad: Ad... Ay...
Mesajlar: 137
Beğeniler: 46 / 21
Ticaret: 1, 100%
coax, adamsın..
CoaX bunu beğendi.
Cevap Yaz Favorilerime Ekle


Konuyu toplam 1 kişi okuyor. (0 üye ve 1 Ziyaretçi)
 
Seçenekler
Stil
Normal Normal

Geri Git   Forum > WordPress


Yetkileriniz
Konu açma yetkiniz: Yok
Cevap Yazma Yetkiniz Yok
Eklenti yükleme yetkiniz: Yok
Mesajınızı değiştirme yetkiniz: Yok

BB code: Açık
İfadeler: Açık
[IMG] Kodları: Açık
HTML kodu: Kapalı




Tüm Zamanlar GMT +3 Olarak Ayarlanmış. Şu anki Zaman: 00:02.