lostyazilim
tr.link

sahibinden.com'dan veri çekme

26 Mesajlar 19.765 Okunma
lstbozum
tr.link

enes3626 enes3626 WM Aracı Kullanıcı
  • Üyelik 02.07.2020
  • Yaş/Cinsiyet 34 / E
  • Meslek Öğrenci
  • Konum Afyon
  • Ad Soyad E** D**
  • Mesajlar 41
  • Beğeniler 9 / 0
  • Ticaret 0, (%0)
Sahibinden.com'dan nasıl veri çekebilirim? Arama linkini vereceğim ve bütün ilanlara ait bilgileri(Başlık, açıklama ve satıcı bilgileri) çekecek. Bir süre sonra IP adresini engelliyor ve veri çekilmiyor.
 

 

wmaraci
reklam

OmerGunay OmerGunay https://omergunay.net Kullanıcı
  • Üyelik 15.05.2015
  • Yaş/Cinsiyet 33 / E
  • Meslek PHP Developer
  • Konum İstanbul Avrupa
  • Ad Soyad Ö** G**
  • Mesajlar 1207
  • Beğeniler 382 / 381
  • Ticaret 16, (%100)
Evet sahibinden de öyle bişey var. Ben kiralık ev ararken sekmelere alıyordum gözüme güzel gelenleri. Çok hızlı sekmeye alıyorum diye bot zannederek beni 1 gün boyunca engellemişti. Bot ile engellemesi normal. Veri çekmeye bir süre eklersen belki çözebilirsin.
Ama ben de takip edeceğim bu konuyu merak ettim bende.
enes3626

kişi bu mesajı beğendi.

Herkes yediğinden ikram eder..(Yavuz Sultan Selim)

aztekiando aztekiando noktalivirgul.net Kimlik Onayı
  • Üyelik 04.09.2019
  • Yaş/Cinsiyet 20 / E
  • Meslek Yazılım
  • Konum Elazığ
  • Ad Soyad A** A**
  • Mesajlar 88
  • Beğeniler 17 / 16
  • Ticaret 1, (%100)
Proxy ayarlayın?
 

 

enes3626 enes3626 WM Aracı Kullanıcı
  • Üyelik 02.07.2020
  • Yaş/Cinsiyet 34 / E
  • Meslek Öğrenci
  • Konum Afyon
  • Ad Soyad E** D**
  • Mesajlar 41
  • Beğeniler 9 / 0
  • Ticaret 0, (%0)
Sadece Türk proxyler çalışıyor ve bedava Türk proxy bulamadım. Para da vermek istemiyorum. Sizin bildiğiniz bir yer var mı bedava proxy için?
 

 

wmaraci
wmaraci

athirsizi athirsizi WM Aracı Kullanıcı
  • Üyelik 21.03.2020
  • Yaş/Cinsiyet 35 / E
  • Meslek Yazılım
  • Konum İzmir
  • Ad Soyad F** K**
  • Mesajlar 530
  • Beğeniler 328 / 197
  • Ticaret 0, (%0)
Girdiğin tarayıcıya kadar biliyorlar yani öyle kolay ve etik bir iş değil
LazCoder53 biletshop mertcanyildirim

kişi bu mesajı beğendi.

v4r1able v4r1able Coder Kullanıcı
  • Üyelik 04.04.2020
  • Yaş/Cinsiyet 19 / E
  • Meslek Kodlama
  • Konum İstanbul Avrupa
  • Ad Soyad L** P**
  • Mesajlar 160
  • Beğeniler 45 / 57
  • Ticaret 1, (%100)

Bir ara şöyle bir şey yapmıştım: https://raw.githubusercontent.com/v4r1able/Sahibinden.com-Bot/master/sahibinden.php

söylenildiği gibi sahibinden.com üzerinde arkadaşın söylediği gibi proxy kullanılabilir zaten t13r eklemişti güncelleme olarak kodlara şuan çalışıyor mu bilmiyorum diğer bir durum eğer zaman ayarlı bir sistem var ise veritaban bağlantılı bir sistem yapıp aranacak şeyleri veritabanına aktar ve sunucuya cron işlemi ekle örnek olarak 10 dakikada bir "php sahibinden_bot.php" çalıştırılsın ve databasede aranacak şeyleri order by id asc olarak ve limit 1 eklenerek sırayla tek tek çekip sonuçları bir txt veya aynı şekilde veritabanında bir bölüme yazdırsın tabi sekme olayı var daha farklı bir yöntem ile aramayı normal bir şekilde yapıp curl ile sayfalara girme işleminde kendin süre tutarak normal bir insan nasıl sürede sayfaları açıp inceliyorsa o şekilde bir süre ekle zaman ayarlı işlem olduğu için sahibinden ip adresini banlamayacaktır büyük ihtimalle.

 

 

v4r1able v4r1able Coder Kullanıcı
  • Üyelik 04.04.2020
  • Yaş/Cinsiyet 19 / E
  • Meslek Kodlama
  • Konum İstanbul Avrupa
  • Ad Soyad L** P**
  • Mesajlar 160
  • Beğeniler 45 / 57
  • Ticaret 1, (%100)

athirsizi adlı üyeden alıntı

Girdiğin tarayıcıya kadar biliyorlar yani öyle kolay ve etik bir iş değil


Tarayıcıyı bilmek çok basit


Tarayıcıyı değiştirmekte çok basit

curl_setopt($curl, CURLOPT_USERAGENT, "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.79 Safari/537.36");
 

 

enes3626 enes3626 WM Aracı Kullanıcı
  • Üyelik 02.07.2020
  • Yaş/Cinsiyet 34 / E
  • Meslek Öğrenci
  • Konum Afyon
  • Ad Soyad E** D**
  • Mesajlar 41
  • Beğeniler 9 / 0
  • Ticaret 0, (%0)
Tarayıcıyı zaten değiştiriyorum. Yine de engelliyorlar. Rastgele user agent değişimi yapıyorum her sayfada.
 

 

athirsizi athirsizi WM Aracı Kullanıcı
  • Üyelik 21.03.2020
  • Yaş/Cinsiyet 35 / E
  • Meslek Yazılım
  • Konum İzmir
  • Ad Soyad F** K**
  • Mesajlar 530
  • Beğeniler 328 / 197
  • Ticaret 0, (%0)
Diyorum ya kolay değil, başına iş alma sonra.
mertcanyildirim

kişi bu mesajı beğendi.

r137 r137 WM Aracı Kullanıcı
  • Üyelik 22.12.2018
  • Yaş/Cinsiyet 34 / E
  • Meslek webdev
  • Konum İstanbul Avrupa
  • Ad Soyad A** C**
  • Mesajlar 17
  • Beğeniler 1 / 4
  • Ticaret 0, (%0)
internet archive dan ve bing gibi arama motorlarının cachelerinden çekmeyi deneyebilirsiniz.
 

 

wmaraci
wmaraci
Konuyu toplam 3 kişi okuyor. (0 kullanıcı ve 3 misafir)
Site Ayarları
  • Tema Seçeneği
  • Site Sesleri
  • Bildirimler
  • Özel Mesaj Al