Yandex webmaster toolsdan kaldırabilirsiniz yada direkt disallow yaparak ilerleyen zamanda kalkmasını bekleyebilirsiniz.