Merhaba arkadaşlar eski bir sitem vardı sildim domaini ve http://web.archive.org/ dan sitemin eski halini görmeye çalışıyorum fakat hata veriyor
Hata: Page cannot be crawled or displayed due to robots.txt.
bu hatayı nasıl düzeltirim veya başka bir site ile sitemin 1 yıl önceki halini görebilirmiyim yardım edin.