Присоединяюсь к поздравлениям!
Да, правильно.
Достаточно правила
Disallow: /addtocart.asp
которое запретит индексацию всех вариантов addtocart.asp с параметрами.
antono, да, отдельный файл для поддомена, только без ошибок, как в вашем.
Попробуйте в htaccess:
DirectoryIndex index.html
Поздравляю с Днем Рождения!
Желаю всего наилучшего!
До прихода робота "H". И понаблюдайте в логах, что он дергал на сайте.
Директива Host -- не более чем настойчивая рекомендация, робот может ее и не послушаться...
Никак нет, это аналог обычного серверного редиректа, Яндекс такие страницы не индексирует.
Робот B
Дергает XML
Где прописать, в robots.txt?
Как бы Googlebot об этот Host не споткнулся, и так приходится отдельную секцию для Яндекса делать.
Попробуйте так:
RewriteEngine On RewriteCond %{HTTP_HOST} ^(www\.)?site\.net\.ru [NC] RewriteRule ^(.*)$ http://www.newsite.ru$1 [L,R=301]
С Днем Рождения!
