можно узнать каким образом вы получили такие запросы? методом тыка на такое вряд ли нарвешься.
это в хелпе кстати описано(пока писал Тимон уже опередил)
только что скормил org причем с первого раза и без проблем
можно по пакету "Бизнес и финансы" узнать примеры сайтов и их показатели?
правильней все же будет так:
User-Agent: Yandex
Disallow: /contacts/
Disallow: /tmp/
Host: ispets.ru
#
User-Agent: *
ап. согласно правилам
с подобными вопросами лучше обращаться сюда:
/ru/forum/optimization-practices/beginners-questions
тогда эту задачу может взять на себя быстробот
невалидный код на позиции не влияет, да и индексирующих ботов врядли остановит.
понятно, спасибо. знач не внимательно читал темы про это
http://niklab.ru
