lostyazilim
tr.link

İçerik Çalan Botları Nasıl Engellerim?

35 Mesajlar 9.696 Okunma
acebozum
tr.link

lhteam lhteam WM Aracı Kullanıcı
  • Üyelik 04.09.2011
  • Yaş/Cinsiyet - / E
  • Meslek Webmaster
  • Konum
  • Ad Soyad ** **
  • Mesajlar 129
  • Beğeniler 8 / 28
  • Ticaret 0, (%0)

AaRAdyOcU adlı üyeden alıntı

haber sitemdeki haberleri çekildiğini fark ettik.

cPanel den o adreslere yasakladık.Şu an haber cekemiyor siteler.

Veri çekmeleri yüzünden sunucumuzdaki trafiği arttı.

O sitelerin ip adreslerini ssh tan iptables den banlayınız.

Hosting ise

htaccess ten ip ve host adresleri engelleyebilirsiniz.



order allow,deny
deny from 42.12.5.34
deny from 193.110.145.185
deny from 212.173.53.
deny from 69.242.
allow from all



RewriteEngine on
# Options +FollowSymlinks

RewriteCond %{HTTP_REFERER} siteadi\.com [NC,OR]
RewriteCond %{HTTP_REFERER} site\. [NC,OR]
RewriteCond %{HTTP_REFERER} sub\.site\.com [NC]
RewriteRule .* - [F]


Proxy nedir biliyormusun !
 

 

wmaraci
reklam

AaRAdyOcU AaRAdyOcU WM Aracı Kullanıcı
  • Üyelik 09.05.2013
  • Yaş/Cinsiyet 47 / E
  • Meslek İnşaat Teknisyeni
  • Konum İzmir
  • Ad Soyad L** Ö**
  • Mesajlar 687
  • Beğeniler 337 / 110
  • Ticaret 24, (%100)
Proxy anlamını biliyorum.
 

 

lhteam lhteam WM Aracı Kullanıcı
  • Üyelik 04.09.2011
  • Yaş/Cinsiyet - / E
  • Meslek Webmaster
  • Konum
  • Ad Soyad ** **
  • Mesajlar 129
  • Beğeniler 8 / 28
  • Ticaret 0, (%0)
İçerik kopyalanmasını engelleyemezsin ki bence google içerik kopyalanmasına karşıysa benim gözümde kalitesi bitmiştir . Şu an piyasada film,dizi sitelerinden tutun,oyun sitelerine kadar hep aynı içeriğe hatta aynı temaya hatta neredeyse aynı domaina sahip siteler var .

Ve buna rağmen hepside googlede yükselebiliyor . Neden böyle biliyormusunuz ? . Sebebi şudur . Google sizin gibi duygusal düşünmez . Derki 2 site evet birbirinin kopyası ama ben ziyaretçi gönderdiğimde ziyaretçiler 2 siteyide seviyor . Eee ben neden yasaklayım bu siteleri der .

Googlenin yasakladığı siteler yok mu? , evet var . Bunun sebebi çok açıktır . Siz eğer facebooktaki veya twitterdaki içeriği kopyalarsanız , google derki , twittera ziyaretçi gönderiyorum 1 saat duruyor . Bu siteye gönderiyorum 10 saniye duruyor hemde ikiside birbirinin aynısı , o zaman ben bu az sevilen siteyi geriye düşürüyüm der.

Ek Olarak:

AaRAdyOcU adlı üyeden alıntı

Proxy anlamını biliyorum.


Bence bilmiyorsun . Ben bir bot yazıyımda engelle beni engelleyebilirsen :D .
 

 

albatroslar albatroslar WM Aracı Kullanıcı
  • Üyelik 17.11.2012
  • Yaş/Cinsiyet 32 / E
  • Meslek Bilgisayar Öğretmeni
  • Konum Konya
  • Ad Soyad Y** Y**
  • Mesajlar 106
  • Beğeniler 7 / 11
  • Ticaret 42, (%100)

lhteam adlı üyeden alıntı

İçerik kopyalanmasını engelleyemezsin ki bence google içerik kopyalanmasına karşıysa benim gözümde kalitesi bitmiştir . Şu an piyasada film,dizi sitelerinden tutun,oyun sitelerine kadar hep aynı içeriğe hatta aynı temaya hatta neredeyse aynı domaina sahip siteler var .

Ve buna rağmen hepside googlede yükselebiliyor . Neden böyle biliyormusunuz ? . Sebebi şudur . Google sizin gibi duygusal düşünmez . Derki 2 site evet birbirinin kopyası ama ben ziyaretçi gönderdiğimde ziyaretçiler 2 siteyide seviyor . Eee ben neden yasaklayım bu siteleri der .

Googlenin yasakladığı siteler yok mu? , evet var . Bunun sebebi çok açıktır . Siz eğer facebooktaki veya twitterdaki içeriği kopyalarsanız , google derki , twittera ziyaretçi gönderiyorum 1 saat duruyor . Bu siteye gönderiyorum 10 saniye duruyor hemde ikiside birbirinin aynısı , o zaman ben bu az sevilen siteyi geriye düşürüyüm der.

Ek Olarak:

Bence bilmiyorsun . Ben bir bot yazıyımda engelle beni engelleyebilirsen :D .

Bahsettiğiniz sitelerde durum normal gibi görünebilir. Flah site, film, dizi gibi olaylarda durum tamamen farklı. Bu tür unsurları baştan yapıp, yenisini çekme gibi bir seçeneğiniz bulunmuyor.

Benim içerikten kastım. Makaleler ile google gözünde değer kazanmaya çalışan bir sitenin içeriğinin çalınması ve google gözünde hırsız konumuna düşürülmesi. Hiç kimse böyle bir şeyi savunamaz, emek hırsızlığından başka bir şey değil bu durum..

Bot yazmaktan anlıyorsanız; bu işin püf noktası nedir? illa ki bir çözüm yolu vardır. Nasıl yapılır fikrinizi bekliyorum...
 

 

wmaraci
wmaraci

ferhatkorkut ferhatkorkut Üyeliği Durdurulmuş Banlı Kullanıcı
  • Üyelik 28.07.2013
  • Yaş/Cinsiyet 31 / E
  • Meslek Öğrenci
  • Konum İstanbul Avrupa
  • Ad Soyad ** **
  • Mesajlar 274
  • Beğeniler 35 / 55
  • Ticaret 2, (%100)

lhteam adlı üyeden alıntı



Bence bilmiyorsun . Ben bir bot yazıyımda engelle beni engelleyebilirsen :D .


Ego..
AaRAdyOcU

kişi bu mesajı beğendi.

AaRAdyOcU AaRAdyOcU WM Aracı Kullanıcı
  • Üyelik 09.05.2013
  • Yaş/Cinsiyet 47 / E
  • Meslek İnşaat Teknisyeni
  • Konum İzmir
  • Ad Soyad L** Ö**
  • Mesajlar 687
  • Beğeniler 337 / 110
  • Ticaret 24, (%100)

lhteam adlı üyeden alıntı

İçerik kopyalanmasını engelleyemezsin ki bence google içerik kopyalanmasına karşıysa benim gözümde kalitesi bitmiştir . Şu an piyasada film,dizi sitelerinden tutun,oyun sitelerine kadar hep aynı içeriğe hatta aynı temaya hatta neredeyse aynı domaina sahip siteler var .

Ve buna rağmen hepside googlede yükselebiliyor . Neden böyle biliyormusunuz ? . Sebebi şudur . Google sizin gibi duygusal düşünmez . Derki 2 site evet birbirinin kopyası ama ben ziyaretçi gönderdiğimde ziyaretçiler 2 siteyide seviyor . Eee ben neden yasaklayım bu siteleri der .

Googlenin yasakladığı siteler yok mu? , evet var . Bunun sebebi çok açıktır . Siz eğer facebooktaki veya twitterdaki içeriği kopyalarsanız , google derki , twittera ziyaretçi gönderiyorum 1 saat duruyor . Bu siteye gönderiyorum 10 saniye duruyor hemde ikiside birbirinin aynısı , o zaman ben bu az sevilen siteyi geriye düşürüyüm der.

Ek Olarak:

Bence bilmiyorsun . Ben bir bot yazıyımda engelle beni engelleyebilirsen :D .


Bence bot yazıp haberlerimi çekmeyi deneme derim.

Cihan Haber Ajansının avukatları peşini bırakmazlar.Sonrada fazla bilginin cezasını çekersiniz.

Her çektiğin haberin yasal uyarısı var.Abonesi değilseniz hiç uğraşmayın..

Ek Olarak:

:rolleyes:
 

 

ferhatbatbay ferhatbatbay WM Aracı Kullanıcı
  • Üyelik 14.05.2013
  • Yaş/Cinsiyet 28 / E
  • Meslek web programlama
  • Konum İzmir
  • Ad Soyad F** B**
  • Mesajlar 652
  • Beğeniler 17 / 82
  • Ticaret 6, (%100)
ben anlamıyorum arkadaş burda arkadaşa yardım etmeye çalışın görüyorum ki çoğu kişi kendini övme, birbirine hava atma peşinde.
AaRAdyOcU

kişi bu mesajı beğendi.

webnetmaster webnetmaster Üyeliği Durdurulmuş Banlı Kullanıcı
  • Üyelik 12.03.2012
  • Yaş/Cinsiyet - /
  • Meslek
  • Konum
  • Ad Soyad ** **
  • Mesajlar 40
  • Beğeniler 6 / 6
  • Ticaret 2, (%100)

davutkara adlı üyeden alıntı

Bildiğim kadarıyla iyi bir programcı her şekilde içerik çekecektir ancak yinede benim şöyle bir çözümüm oluyor.

Örneğin kaynağınızdaki yazı şu şekilde


Deneme yazı içerik


botu yazan adam
ile
arasını çekiyor. Şimdi biz yazı
diye ayarladığımız classı değişken bir değer yaparsak örneğin dk3745 felan
diye ve bu her sayfaya girildiğinde değişse. Bot bunu bulamayacağı için belirli
aralığı çekemeyecektir. Ancak bu kezde sitenin style bozukluğu olmaması bu
yazının bir üstüne aynı divi koyman gerekecek.

Aslında böyle farklı fikirler çıkabilir belki ilerde bu konuyu çok iyi düşünüp bir wordpress eklentisi yapabilirm.


şu anda en mantıklısı bu gibi geliyor.

yazının tamamın yer aldığı divleri sayfa her açılışında bir değişkene atayarak tanımlanabilir diye düşünüyorum.

Sonuça botlar neden patlıyor? içerik aldığı sayfanın kodlaması yada css düzeni değiştiği için patlıyor.

Örnek


konunun tamamı burada


Botlar bu kısımlar arasından alıyor sen "content1" dediğinde bot bu bölümü bulamayacak.

Ama aynı değişkliği .css dosyası içinde de yapman gerekiyor yoksa sayfa dağılır gider.

Aslında 1 dakikalı olay bu yapılabilir. haftada 1 yapsan zaten bıkarlar uğraşmazlar bi daha
 

 

albatroslar albatroslar WM Aracı Kullanıcı
  • Üyelik 17.11.2012
  • Yaş/Cinsiyet 32 / E
  • Meslek Bilgisayar Öğretmeni
  • Konum Konya
  • Ad Soyad Y** Y**
  • Mesajlar 106
  • Beğeniler 7 / 11
  • Ticaret 42, (%100)
nasıl yapılacağını bilsem; yapacağım da hiç anlamadım ki; şu bahsedilen olayı. Nereden yapacağız, nasıl yapacağız?
 

 

davutkara davutkara Öğrenci Kullanıcı
  • Üyelik 15.07.2013
  • Yaş/Cinsiyet 29 / E
  • Meslek Öğrenci
  • Konum Ankara
  • Ad Soyad D** K**
  • Mesajlar 329
  • Beğeniler 20 / 68
  • Ticaret 1, (%100)

albatroslar adlı üyeden alıntı

nasıl yapılacağını bilsem; yapacağım da hiç anlamadım ki; şu bahsedilen olayı. Nereden yapacağız, nasıl yapacağız?


o zaman şimdilik yeni bir tema kullanın derim.
 

 

davutkara.com | DAVUT KARA BLOG | Wordpress Uzmanı
Site Ayarları
  • Tema Seçeneği
  • Site Sesleri
  • Bildirimler
  • Özel Mesaj Al