Merhaba
Sitemde değişiklik yaptığımda 2 dk veritabanı hatası veriyordu
Log kayıtlarında http://www.majestic12.co.uk/bot.php?+) bot un yogun bir şekilde siteme hata verdirdiğini gördüm
Araştırdığım kadarı ile majestic12 botu .htaccess kitleyerek hata verdiriyormuş
şimdi bu botu engellemeye çalışıyorum
Engellemeye yönelik fikri olan varsa paylaşsın lütfen
- Üyelik 20.05.2013
- Yaş/Cinsiyet 41 / E
- Meslek Serbest
- Konum İstanbul Avrupa
- Ad Soyad M** Y**
- Mesajlar 1170
- Beğeniler 216 / 214
- Ticaret 0, (%0)
- Üyelik 13.04.2012
- Yaş/Cinsiyet 47 / E
- Meslek Hosting, Domain, Marka, Patent
- Konum İzmir
- Ad Soyad S** E**
- Mesajlar 972
- Beğeniler 134 / 216
- Ticaret 20, (%100)
Majestic12 botu, sitenizin link inşasını incelemek için gelir. Hataya neden olmasına bir anlam veremedim.
- Üyelik 04.01.2014
- Yaş/Cinsiyet 34 / E
- Meslek .
- Konum Diğer
- Ad Soyad B** G**
- Mesajlar 366
- Beğeniler 175 / 87
- Ticaret 7, (%100)
Şöyle Bir Yazı Var Sitesinde : " How can I block MJ12bot?
MJ12bot adheres to the robots.txt standard. If you want the bot to prevent website from being crawled then add the following text to your robots.txt:
User-agent: MJ12bot
Disallow: /
Please do not waste your time trying to block bot via IP in htaccess - we do not use any consequitive IP blocks so your efforts will be in vain. Also please make sure the bot can actually retrieve robots.txt itself - if it can't then it will assume (this is the industry practice) that its okay to crawl your site.
If you have reason to believe that MJ12bot did NOT obey your robots.txt commands, then please let us know via email: bot@majestic12.co.uk. Please provide URL to your website and log entries showing bot trying to retrieve pages that it was not supposed to. "
MJ12bot adheres to the robots.txt standard. If you want the bot to prevent website from being crawled then add the following text to your robots.txt:
User-agent: MJ12bot
Disallow: /
Please do not waste your time trying to block bot via IP in htaccess - we do not use any consequitive IP blocks so your efforts will be in vain. Also please make sure the bot can actually retrieve robots.txt itself - if it can't then it will assume (this is the industry practice) that its okay to crawl your site.
If you have reason to believe that MJ12bot did NOT obey your robots.txt commands, then please let us know via email: bot@majestic12.co.uk. Please provide URL to your website and log entries showing bot trying to retrieve pages that it was not supposed to. "
- Üyelik 20.05.2013
- Yaş/Cinsiyet 41 / E
- Meslek Serbest
- Konum İstanbul Avrupa
- Ad Soyad M** Y**
- Mesajlar 1170
- Beğeniler 216 / 214
- Ticaret 0, (%0)
Nator hosta sorunu bildirdim yardimci olmayacaklar sandim ama oldular site normale döndü.
- Üyelik 20.05.2013
- Yaş/Cinsiyet 41 / E
- Meslek Serbest
- Konum İstanbul Avrupa
- Ad Soyad M** Y**
- Mesajlar 1170
- Beğeniler 216 / 214
- Ticaret 0, (%0)
Nasıl çözdüklerini bilmiyorum sadece hallettiklerini söylemişlerdi ama natronun huyudur sorunum var derseniz halletmezler siz teşhisi koyun onlar çözer zaten 4-5 aydır digitalocean e geçmek zorunda kaldım yoksa natro iyidir
Konuyu toplam 1 kişi okuyor. (0 kullanıcı ve 1 misafir)