Pardon ben konuyu yanlış anladım, bunlar default robots.txt ayarları, botlarını engellemeniz için değil. WordPress sildiyseniz zaten Google botları sitenizi tarayıp, konulara ulaşamayınca indexleri silecektir, ek bir şey yapmanız gerek yok.