Редирект с domain.tld на www.domain.tld получился бан, что дальше?

1 23
YuraZ
На сайте с 05.06.2006
Offline
95
#21

> Disallow: All

Так нельзя. Disallow: / тогда уж.

И разделять роботсы в зависимости от www / nowww не стоит по-моему, по идее хватит роботса, в кот. пустой Disallow и правильный host.

P
На сайте с 12.06.2006
Offline
43
#22
Anton:
Стало быть теперь терпеливо ждем-с?
Или есть еще какие нибудь замечания?

Не волнуйтесь. Все хорошо будет. Я такую же ошибку когда то сделал по неопотности. Половина страниц вернулась в первый же ап. На будущее: смотрите www.be1.ru/stat/. Если во всех поисковиках уменьшается количество проиндексированных страниц, то это не бан Yandexa, в Ваш косяк.

Лёлик
На сайте с 28.04.2006
Offline
54
#23

robots.txt должен быть один:

User-Agent: Yandex
Disallow:
Host: www.site.ru

User-Agent: *
Disallow:

Директивой Host: www.site.ru вы запрещаете к индексации site.ru.

K. Ermakov
На сайте с 10.12.2004
Offline
328
#24
Anton:
Сейчас редиректа вообще нет никакого

Как долго нет редиректа? Не стал ли после этого индексироваться сайт?

Anton:
С зеркалом яндекс определился и считает им домен без www, что в принципе от него и требовалось

Вот и славно.

А теперь следите за руками.

1) Яндекс выбрал в качестве основного домен без www. Следовательно, все остальные зеркала (в том числе, домен с www) он не индексирует.

2) Вы добавляете 301й редирект с домена без www на домен с www. Это говорит Яндексу, что на домене с www ему делать нечего, ибо 301. Но, в силу 1), Яндекс не индексирует и домен с www.

Вот Вам и исчезновение сайта из выдачи.

С уважением, Константин Ермаков, absite.ru: онлайн кроссворды (http://absite.ru/); searchsuggest.ru: поисковые подсказки доставляют (http://searchsuggest.ru/).
A
На сайте с 29.12.2005
Offline
118
#25
YuraZ:
> Disallow: All
Так нельзя. Disallow: / тогда уж.

Да, конечно, нужен слеш - это руки автоматом апачевый конфиг правят. :)

Лёлик:
robots.txt должен быть один

В принципе да, масло масленое, но с другой стороны кроме некоторой избыточности ничего противозаконного в таком роботсе нет, да и директиву host только яндекс понимает, пускай уж гуглы и остальные рамблеры тоже зеркала без www не трогают.

K. Ermakov:
А теперь следите за руками

Извиняюсь, путаница в терминологии получилась.

Основное зеркало с www и разрешено к индексации.

Редиректа нет уже несколько дней, может быть с неделю.

Сайт индексируется I ботом. Хотя вот только что посмотрел логи, сегодня I бота не было, зато раз десять зашел D бот и взял robots.txt, похоже вчерашние эксперименты с адурилкой повлияли на ситуацию.

Dalim
На сайте с 13.01.2006
Offline
47
#26
Bloody dude:
Яндекс при 301 не передает тиц

На основе чего вы это утверждаете?

Уже приводил на форуме доказательства, что тИЦ передается при редиректе.

1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий