Mrtcn Daha önce böyle bir deneyim yaşadınız mı? Sorunu yaşayan arkadaş analytics değerlerini paylaşmamış, elde veri olmadan bunu crawl olarak nasıl değerlendirebiliyorsunuz?
Hocam hiç sormayın bir müşterimde böyle bir durum oldu, monitoring uygulamasından gelen çağrı ile denk geldim,
Sunucu olduğu için user-agent görme fırsatım olduğundan, archive.is kardeşimizin botları olduğunu gördüm.
Analitik üzerine bilgileri yansımadığınıda belirteyim. Özellikle analitik verilerini almamak için ayarlanmışlar.
Tam sayısını hatırlamıyorum ama. İP adresi tarayan 49 adet, İçerik arşivleyende 40 adet kadar servis olması gerekiyor.
(Vakit bulursam hepsini toparlayıp bir dataset hazırlarım. Herkesin işine ciddi anlamda yarayacağını düşünüyorum.)
CloudFlare üzerinde bulunursanız. Botlar Ratelimit takılıp parça parça alacağı için ani yükselmeler görmezsiniz. Ama onun dışında her daim bu arkadaşlar siteleri taramaya devam edecek.
İnternetin doğası bunu gerektiriyor. :)