Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Подскажите чайнику.

Master_globus
На сайте с 15.09.2006
Offline
113
Master_globus
443

Подскажите пожалуйста чайнику.

Сайт будет продвигаться с www

Правильно ли я понимаю, что конструкция типа:

----------

User-Agent: *

Host: myhost.ru

--------

в robots.txt запретит для индексации все страницы myhost.ru но НЕ ЗАПРЕТИТ все страницы http://www.myhost.ru:confused:

то-есть необходимо что-бы основной сайт был с www

Работаю только с diafan.CMS 4.4.0 (http://cms.diafan.ru/cms576/)
6666
На сайте с 10.01.2005
Offline
505
6666
#1

Master_globus, да, только наоборот :)

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
Master_globus
На сайте с 15.09.2006
Offline
113
Master_globus
#2

Почему тогда при конструкции

---------------------------

User-Agent: *

Host: myhost.ru

-------------------------

делаю проверку http://www.yandex.ru/cgi-bin/test-robots

пишет что

Запрещена индексация всех URL, начинающихся с указанных префиксов:

myhost.ru

а при конструкции

-----------------------

User-Agent: *

Host: www.myhost.ru

-----------------------

пишет что

Запрещена индексация всех URL, начинающихся с указанных префиксов:

www.myhost.ru

Olya
На сайте с 03.12.2003
Offline
120
Olya
#3

что конкретно пишите в яндексе?

напишите www.myhost.ru при конструкции

User-Agent: *

Host: www.myhost.ru

Диол :)
Master_globus
На сайте с 15.09.2006
Offline
113
Master_globus
#4
Olya:
что конкретно пишите в яндексе?

При проверке http://www.yandex.ru/cgi-bin/test-robots

во всех случаях указывал адрес с www

Olya
На сайте с 03.12.2003
Offline
120
Olya
#5

у Вас сейчас вообще робот не залит на сайт

Olya
На сайте с 03.12.2003
Offline
120
Olya
#6

плюс на основное зеркало директиву host вообще можно (нужно) не выкладывать, может из-за этого

zhitov
На сайте с 30.01.2005
Offline
219
zhitov
#7
Master_globus:
Почему тогда при конструкции
---------------------------
User-Agent: *
Host: myhost.ru
-------------------------
делаю проверку http://www.yandex.ru/cgi-bin/test-robots
пишет что
Запрещена индексация всех URL, начинающихся с указанных префиксов:
myhost.ru

Правильно будет так:

User-Agent: *
Disallow:
Host: www.myhost.ru

(Обязательно надо писать Disallow: )

User-Agent: все

Disallow: ничего

Host: главное зеркало

Строительные калькуляторы ( https://www.zhitov.com/ )
S
На сайте с 28.10.2005
Offline
306
semenov
#8 


User-agent: *

Disallow:



User-agent: Yandex

Disallow:

Host: www.myhost.ru

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий