Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Извините за такой вопрос, но не смогу сформулировать запрос для поиска

A
На сайте с 21.09.2007
Offline
41
Asaf
413

Сайт проиндексировался с www и без него (www.site.ru и site.ru). Мне нужно оставить в индексе Яндекса site.ru.

Надо прописать в robots.txt: host: http://site.ru

Я правильно мыслю?

fima32
На сайте с 12.01.2006
Offline
132
fima32
#1

Мыслите неправильно, но неточно

http:// сюда пихать не нужно

Правильно так(именно с большой буквы):

Host: site.ru
metaContent
На сайте с 31.03.2007
Offline
103
metaContent
#2 

# http://site.ru/robots.txt



User-agent: *

Disallow: /advanced

Disallow: /art

Disallow: /search

Disallow: /tune



User-agent: Yandex

Disallow: /advanced

Disallow: /art

Disallow: /search

Disallow: /tune

Host: site.ru



# Если ничего не закрыто для индексации - напишите в секции для Яндекса пустую Disallow: перед Host: site.ru

http://robotstxt.org.ru/rurobots/yandex#h79-4

http://webmaster.yandex.ru/faq.xml?id=996583#usehost

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий