Bir ara .htaccess için toplu düzenleme eylemi gerçekleştirilmişti, sanırım aynısı robots.txt için de yapılabilir; gelişitirilebilir. Başlangıç için fena değil gibi, tabi uzmanlara da bir danışmak gerekli.