Пару лет назад я прогнал свой новый сайт (СДЛ, качественный самописный контент, дизайн) по каталогам. Каталоги были самые разные, я тогда особо на качество каталогов не смотрел. После этого сайт был забанен. Потом была долгая переписка с Платоном, который несколько месяцев отписывался стандартно: "развивайте сайт, и он вернется, бла-бла".
Поэтому могу сказать, что при прогоне по каталогам нового сайта, санкции могут быть (могут и не быть, конечно).
Проверил навскидку несколько страниц - везде неуникальный контент. Очень возможно, что причина в этом. Переписывайте неуникальный контент и неуникальные описания товаров - в любом случае будет полезно для сайта.
У меня был подобный случай, когда в индексе осталась только морда, а все остальные страницы отметились как запрещенные в роботсе. После письма в техподдержку через панель вебмастера все вернулось в индекс где-то через неделю. Рекомендую написать в саппорт Яндекса.
P.s. По-моему, так будет правильнее:
User-agent: * Disallow: User-agent: Yandex Disallow: Host: sait.ru
Нет. Не будет.
fxxx33, покажите сайт, можно в ЛС.
Конфигурация сайта -> Настройки -> Основной домен
Да, правильно. Вы же так и спросили:
Если у вас этот роботс будет только для домена без www, а для домена с www будет другой роботс, то домен c www индексироваться не будет.
С какой целью хотите закрыть поддомен? Может, вам что-нибудь другое поможет.
Как вариант. Или указать в панели вебмастера Гугла, чтобу домен отображался как домен c www. Или и то, и другое.
Вот так правильно:
User-agent: GooglebotDisallow: /
Причем такой роботс должен выдаваться только для site.ru, но не для www.site.ru.
Еще http://copyscape.com.
Яндексоиды на семинаре говорили, что в Японии рулит http://www.yahoo.co.jp.