Как работает робот-зеркальщик?

DF
На сайте с 08.05.2008
Offline
2
1187

Есть domen.narod.ru

Проект переехал на domen.ru

Но у народного домена намного выше индекс цитирования. Дабы перетащить индекс на новый сайт, в старый кладём robots.txt:

User-agent: *

Disallow:

Host: www.deepdig.ru

Теперь вопросы.

1) Чтобы робот-зеркальщик яндекса склеил сайты, насколько они должны быть идентичны? Если index.html будет разный, не прокатит?

2) Такой robots.txt и для других поисковиков прокатит?

V
На сайте с 30.03.2007
Offline
8
#1

Они не должны быть идентичны, просто указываете на какой домен будет литься весь вес путем указания домена основного вот и все.

А звездочка в агенте обозначает, что для всех роботов поисковых машин.

K
На сайте с 31.01.2001
Offline
737
#2
Varek:
Они не должны быть идентичны, просто указываете на какой домен будет литься весь вес

Щаззз. Зеркала - это одинаковые сайты.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
DF
На сайте с 08.05.2008
Offline
2
#3

Вот и интересно, _насколько_ они должны быть одинаковыми. Всё-всё-всё, вплоть до размера всех файлов и содержимого картинок?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий