Что может быть?

12
S
На сайте с 06.03.2005
Offline
18
#11

Содержимое тоже правильно? А то синтаксис ведь значим, полагаю... Весь robots.txt состоит из этих двух строк. Так?

S
На сайте с 06.03.2005
Offline
18
#12

Ой, вот вопрос... А можно ли... и нужно ли, вот так:

User-Agent: *

Host: www.handsmetals.com

Host: handsmetals.com

?

wolf
На сайте с 13.03.2001
Offline
1183
#13

А как Вы думаете, логично ли писать две противоречащие друг другу директивы?

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
S
На сайте с 06.03.2005
Offline
18
#14

Ясно, спасибо. И последний вопрос... Только что в яндексе заметил - там написано, что robots.txt с host только на зеркала класть. Тут же мне посоветовали и на зеркало, и на настоящий. Можно разъяснить сие противоречие?

D
На сайте с 23.05.2002
Offline
173
#15

Настоящий - главное зеркало, но тоже зеркало.

И Disallow: не забыть...

S
На сайте с 06.03.2005
Offline
18
#16

Минуточку... но ведь в Disallow записывается то, что нужно запрещать к индекированию. А у меня такого нет. Так что же мне в Disallow записать?

D
На сайте с 23.05.2002
Offline
173
#17

Ничего.

User-Agent: *

Disallow:

Host: www.handsmetals.com

S
На сайте с 06.03.2005
Offline
18
#18

Ясненько, спасибо большое.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий