Форум Поисковые системы Google

Гугль игнорирует robots.txt ?

1 23
C
На сайте с 19.09.2001
Offline
120
Cherny
#21

Перевод строки в robots.txt по стандарту может быть любым:

The file consists of one or more records separated by one or more blank lines (terminated by CR,CR/NL, or NL)
С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
W
На сайте с 22.03.2005
Offline
0
Webir
#22

Народ, я так и не понял, подскажите. Вот что мне нужно.

Есть два сайта:

  • www.Домен.com
  • Поддомен.Домен.com

Как мне указать Google, что Поддомен.Домен.com является зеркалом www.Домен.com в robots.txt

И что, Домен.com тоже зеркало www.Домен.com

И как это сделать для Яндекса?

По поиску не нашел.

parhach
На сайте с 07.06.2004
Offline
76
parhach
#23

как понял Kastorskiy закрывает доступ к директории ссылок ?

Срубы - бани (http://www.dok6.ru)
K
На сайте с 20.12.2004
Offline
62
Kastorskiy
#24
Как писал parhach
как понял Kastorskiy закрывает доступ к директории ссылок ?

Да. Это неправильно?

Лучше день потерять, а потом за пять минут долететь (c (http://andrey.lviv.ua/)) м/ф "Крылья, ноги, хвост"
dpromo
На сайте с 14.07.2004
Offline
40
dpromo
#25
Как писал Kastorskiy

Да. Это неправильно?

Конечно не правильно! И ты это понимаешь....

K
На сайте с 20.12.2004
Offline
62
Kastorskiy
#26
Как писал dpromo

Конечно не правильно! И ты это понимаешь....

Ну ведь за те ссылки не требуется размещать ответные.

Хотя, может вы и правы, надо всё-таки открыть.

1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий