Файл robots.txt

Источник Robots.txt: на сайте http://xn--80aaxhfhc0c8b.xn--j1amh/robots.txt на момент обработки проекта.