Вопрос о зеркалах в Яндексе

12
FC
На сайте с 04.09.2005
Offline
20
#11

а в User-agent: указывать "*" (т.е. для всех поисковиков или только для яндекса?)

Как лучше сделать в моём случае?

SS
На сайте с 03.09.2004
Offline
141
#12

"User-agent: *" - это инструкции для всех роботов.

Чтобы указать персональные инструкции Яндексу - пропишите для него

-----

User-agent: Yandex

# и тут список список инструкций для Яндекса

-----

Чтобы задать иснтрукции для остальный поисковиков - аналогичные секции пропишите для их роботов.

Пример такой кострукции - это роботс.тхт для этого форума.

«Клянусь своей жизнью и любовью к ней, что никогда не буду жить ради другого человека и никогда не попрошу и не заставлю другого человека жить ради меня» (с) Джон Галт
FC
На сайте с 04.09.2005
Offline
20
#13

Не - это я понял, я спрашиваю в моём конкретно случае лучше писать инструкции только для яндекса или для всех поисковиков?

И как собственно сделать ссылку со страницы на файл robots.txt? или поисковики его сами найдут?

Torio
На сайте с 25.06.2005
Offline
124
#14

Еще рекомендовал бы научиться пользоваться поиском, и прочитать вот эту тему:

/ru/forum/23286+301

С уважением, Виктор. Тел: (905) 610-95-80
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий