Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robotx.txt и Яндекс

TpaBkuH
На сайте с 21.07.2007
Offline
161
TpaBkuH
421

В общем ситуация такая: есть недавно созданный новый сайт (сайт планирую раскручивать с www).

Вот что в роботсе:

User-agent: *

Disallow:

User-agent: Yandex

Disallow:

Host: www.САЙТ.ru

Sitemap: http://www.САЙТ.ru/sitemap.xml

Но, после очередного апдейда в яндаксе, страницы сайта попадают в поиск БЕЗ www, и так почти с каждым сайтом. Через пару месяцев все налаживается и все страницы с www.

Почему так происходит? Может у меня в robots.txt что-то не правильно написано?

Первые 7735$ я заработал здесь (http://www.sape.ru/r.ec23dcd379.php)
windmill
На сайте с 08.12.2010
Offline
131
windmill
#1

Нет, роботс правильный. Только зачем надо было отделять яндекс, когда можно было для всех поисковых роботов прописать хост и сайтмап? Кстати, не забывайте что внешние ссылки лучше чтобы тоже были с www, так же как и внутрянняя перелинковка .

DreamCash.tl (http://dreamcash.tl/) - максимальный заработок на онлайн-видео. До 95% отчислений, конверт до 1:20. Парковка доменов, хостинг, автовыкуп подписок, полный охват wap-трафика. Рефоводам 50% от дохода партнерки!
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#2
windmill:
когда можно было для всех поисковых роботов прописать хост

Вот им будет интересно...

ttav
На сайте с 04.12.2010
Offline
30
ttav
#3
kimberlit:
Вот им будет интересно...

Многозначительно...

А что не интересно? Вам все понятно? А человеку может непонятно, вы б пояснили, а мы б почитали.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий