Bu cevabı webmastersitesi.com'un Kurucularından W-S sitesindeki bir konuda belirtmiş direk onun yorumunu kopyalıyorum.

[quote=W-S]baidu çinlilerin harika bir arama motorudur. Ancak çinden gelecek ziyaretilerin pek bir faydası yoktur o nedenle bunu robots.txt den engellemekte fayda olabilir. Baidu veya dfiğer arama motoru botları esasen içeriğinizi veritabanlarına taşırlar böylece arama yapanlara aradıkları bilgileri bulmalarına aracılık ederler. Ayrıca bu bilgilerin güncelliğide önemli bir etkendir. Bu nedenle botlar sık ziyarete ederek içeriklerini güncel tutmayı hedefler. Ancak botlarda aynı web trafiği gibi bir maliyet ve kaynak harcaması yapar. Bunları hedeflerinize göre ayarlamak webmasterların bir görevidir. :D
[/quote]