YandexBot, Yandex tarafından meydana getirilmiş olan arama yazılımı ve robotudur. YandexBot'lar sürekli olarak internet üzerinde yer alan sayfaları tarar ve elde ettiği bilgileri arama motorunun haznesine sunarlar. Böylece Yandex'in arama motoru tam işlevini yerine getirir ve kullanıcılara istediği en yakın sonuçları vermeye çalışır.
YandexBot Test
YandexBot'un web sitenizi tam olarak tarayıp tarayamadığını merak ediyorsanız, bu konu hakkındaki şüphelerinizi gidermek için oluşturulmuş olan Yandex Robot aracını deneyebilirsiniz.
Yandex Robot aracına giriş yaptıktan sonra web sitenizin URL'sini Host Adı kısmına yazın. Daha sonra Siteden Robots.txt Dosyasını Yükle butonuna basın. Bir sonraki aşamadaysa sayfanın alt kısmında yer alan Denetle butonuna basın. Sonuçlar size Yandex Bot'un sitenize ulaşıp ulaşamadığını rapor edecektir.
Robots.txt Nedir? Robots.txt Ne İşe Yarar ve Robots.txt Nasıl Olmalı?
Robots.txt, tüm sunucuların ve sitelerin ana dizini içerisinde yer alması gereken botlara karşı verilecek komutları içerisinde barındıran bir bilgilendirme/ayar dosyasıdır. İnternet üzerinde insanlar yerine çalışan birçok bot vardı...
YandexBot User Agent
Yandex'in farklı taramalar gerçekleştirmek için farklı robot yazılımları vardır. En genel tarama amacıyla tarama işlemi gerçekleştiren bot ise YandexBot adını verdiğimiz bottur. Bu Bot'un User Agent'ına aşağıdan ulaşabilirsiniz;
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
