PHP botların veri çekmesini engelleme

Eğer bir ziyaretçi herhangi bir şekilde verilere erişebiliyorsa, botlar da erişebilir. Botları engellemenin yolu botların nasıl çalıştığını anlamaktan geçiyor.

Örneğin bir bot sitenizi ziyaret ettiğinde bulduğu bağlantılar ve yazılar arasında hızla geçiş yapar, bu bir ziyaretçinin yapmayacağı bir şey. Bir insanın, 10 saniyede 10 ayrı içeriği görüntülemesinin olağan dışı olduğunu düşünürseniz bu hızda sitenizde dolanan birinin aslında bir bot olması oldukça mümkün. Yazacağınız basit betiklerle bu gibi olağandışı aktiviteleri tespit edip, örneğin yukarıda verdiğim örnekteki gibi bir durum gerçekleştiğinde kullanıcıdan bir resim doğrulaması isteyebilirsiniz, botlarla mücadelede bu çok kullanılan bir yöntemdir.

Çok mantıklı görünüyor, ancak dikkatli olmanız gereken noktalar var. Her bot karanlık bir efendiye hizmet etmez. Google, Yandex gibi arama motorları da sitenizi indexlerken botlar, ya da daha bilinen adıyla Örümcek'ler kullanır. Aynı bir bot gibi örümcekler de sitenizde çok hızlı bir şekilde dolanır, eğer bu örümceklerden biri yazılarınızı indexlerken bu engele takılırsa bu siteniz için hiç iyi olmaz. Bu yüzden yazacağınız bu betiklerde arama motorları için ayrıcalıklar oluşturmalısınız.

Yukarıda anlattığım yöntem de dahil olmak üzere hiçbir yöntem botları gerçekten engellemez, acemiler üzerinde işe yarayabilir, ancak profesyonelleri sadece yavaşlatabilir.

javascript ile çalışan sitelerde verilerin nereden geldiğini networku izleyerek bulabiliyoruz. Sadece ne şekilde geldiğini anlayamıyoruz bazen, onlar da ileri seviye sitelerde oluyor. Genelde javascript bile çare olmuyor artık.

En iyi çözüm dmca.basacaksınız parayı içeriğin telifini alacaksınız.çalan olursa indexi sildirirsiniz.botları engeleyemezsiniz.

pregmatch, curl yada python ile yazılan bir botu engellersiniz belki ama tüm botları engellemek imkansız. Bot mantığına da aykırı zaten.

Ne yaparsan yap o veriyi ekrana yazdığın takdirde ben o veriyi oradan alırım :)

aynen işe yarayacağını sanmıyorum..

Arkadaşlar bu konunun üstüne giderseniz sonucu ip blocklama bulursunuz yalnız proxy ile o aşılıyor tüm ipleri bloklamakta google ve diğer arama motorlarının botlarınıda engellemek anlamına gelirki bu da zaten veriyi bir hiç anlamına getiriyor boşverin çeken çeksin :D

Büyük siteler genelde java ile atıyorum jquery dosyasının içinde div açtırıyosa bir başka js dosyasında içeriğin bir bölümünü resimlerini ayrı bi js dosyası içerisinde çektiriyo. Çok zorlamıştı ama normal bot yapımcıları kolay kolay yapamaz işinde ciddi profesyonel birisiyse yapabilir. 10 kişiden biri yapsa bile iyidir :D

kendi kanaatim birşeyi görüyorsam onu alabilirim...kim ne derse desin botları engellemek değil sadece coderı biraz zorlarsınız yapacağınız işlemle...

En mantıklısı CSS yapısını haftada bir değiştirmek. Bot düzenlenip yeniden dağıtılana kadar eski sürümünü çalışmaz kılar. Sonuçta botcular yapıp satıyor. Yüzlerce kişi kullanıyor o botu. Hepsi yeni sürümü elde edene kadar vakit kazanırsın. İçerikleri de haftada bir topluca girersen, en az 4-5 gün bot ile çalınmasını engellemiş olursun.