cwt adlı üyeden alıntı

web sitelerinde yazdığı kadarıyla geliştirilme aşamasında olan ve dünyanın en büyük arama motoru olma iddiasını taşıyorlarmış.
engellemek istiyorsanız robots.txt dosyasına aşağıdaki kodu ekleyin
User-agent: MJ12bot
Disallow: /


Engelleme konusunda kararsız kaldım hocam. Zararlıysa engelleyeceğim, zararsızsa dokunmayacağım. Dünyanın en büyük arama motoru olma iddası varsa zararlı birşey olmamalı ama, sizin tecrübeniz var mı?