Форум Практика оптимизации Любые вопросы от новичков по оптимизации

проблемы со склейкой, помогите разобраться

12 3
romich
На сайте с 13.02.2006
Offline
8
romich
1212

Был в выдаче сайт _extreme.perm.ru_

было у него несколько зеркал:

_extrim.perm.ru_

_extrem.perm.ru_

попытка склейки следующим путем:

robots.txt 

User-Agent: *

Disallow: /cgi-bin

Host: www.extreme.perm.ru

привела к тому, что теперь в выдаче и в каталоге висит _extrim.perm.ru_

Вопрос: почему так произошло? :eek:

и еще почему здесь 

http://www.yandex.ru/cgi-bin/test-robots?host=extreme.perm.ru_

пишут что индексация запрещена полностью ?

веб дизайнъ (http://www.insite.perm.ru), создать сайт (http://www.insite.perm.ru)
AleM
На сайте с 18.10.2005
Offline
10
AleM
#1

В роботсе основным зеркалом назначен www.extreme.perm.ru, а индексация extreme.perm.ru соответственно запрещена.

Зеркальщик не так часто ходит, чтобы ожидать каких-либо изменений в течении нескольких дней.

Заходите и к нам на огонек MasterTalk - второй форум оптимизаторов в РуНете (http://mastertalk.ru/) надеюсь станет и первым :)
romich
На сайте с 13.02.2006
Offline
8
romich
#2

т.е. вы имеете ввиду что если я уберу www. после того как меня навестит "Зеркальщик" все вернется на место ?

AleM
На сайте с 18.10.2005
Offline
10
AleM
#3

Определитесь, чего именно Вы хотите добиться.

Если пропишете такой роботс:

User-Agent: *

Disallow: /cgi-bin

Host: extreme.perm.ru

то основным зеркалом будет extreme.perm.ru

индексация www.extreme.perm.ru естественно будет запрещена.

romich
На сайте с 13.02.2006
Offline
8
romich
#4

я хочу добится того чтобы индексировалось главное зеркало (_extreme.perm.ru_) а не (_extrim.perm.ru_) ...

AleM
На сайте с 18.10.2005
Offline
10
AleM
#5

Пропишите на всех зеркалах роботс:

User-Agent: *

Disallow: /cgi-bin

Host: extreme.perm.ru

FlyAway
На сайте с 01.06.2005
Offline
439
FlyAway
#6

А я бы прописал бы:

User-Agent: Yandex

Disallow: /cgi-bin/

Host: extreme.perm.ru

Сердюченко Андрей (http://www.serdyuchenko.ru/) Масонская ложа — SЕ-Team.ru (http://goo.gl/YIjV6h) :)
AleM
На сайте с 18.10.2005
Offline
10
AleM
#7

Ну, тогда по-моему лучше вот так:

User-Agent: Yandex

Disallow: /cgi-bin/

Host: extreme.perm.ru

User-Agent: *

Disallow: /cgi-bin/

C
На сайте с 12.11.2004
Offline
80
coolice
#8

а почему именно так, другие роботы для которых * не узнают что сайт зеркало?

FlyAway
На сайте с 01.06.2005
Offline
439
FlyAway
#9

coolice, они не понимают директивы Host, её только Яндекс понимает.

C
На сайте с 12.11.2004
Offline
80
coolice
#10

как другие узнают что сайт перенесен на новый домен?

мне в соседнем топе посоветовали пока ограничится только файлом robots.txt, а .htaccess пока не трогать... пока не зазеркалятся

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий