роботс составлял человек, который и создавал сайт---------- Добавлено 16.12.2016 в 14:20 ----------
убрать из файла сайтмап?
хотя сам файл роботс мне не очень нравится, почему его составитель поставил allow для скриптов и так далее?
роботс составлял человек, который и создавал сайт
---------- Добавлено 16.12.2016 в 14:20 ----------
Скорее всего, в sitemap.xml присутствуют адреса страниц, закрытых в robots.txt - попробуйте их оттуда убрать.
убрать из файла сайтмап?
хотя сам файл роботс мне не очень нравится, почему его составитель поставил allow для скриптов и так далее?