Форум Практика оптимизации Любые вопросы от новичков по оптимизации

помогите написать robot.txt

kapapapa
На сайте с 22.10.2009
Offline
44
kapapapa
385

Файл robot.txt я писать не умею. Расскажите, пожалуйста, что нужно написать, чтобы www.мой_сайт.ru был основной, а мой_сайт.ru его зеркалом.

Очень прошу помочь.

converse19880604
На сайте с 31.05.2009
Offline
164
converse19880604
#1

....robotstxt.org.ru

[Удален]
#2

Самый простой вариант может выглядеть так:

User-agent: *

Disallow:

Host: www.site.ru

DiAksID
На сайте с 02.08.2008
Offline
236
DiAksID
#3
jfar:
Самый простой вариант может выглядеть так:

User-agent: *
Disallow:
Host: www.site.ru

не стоит всем ботам подсовывать убогую яшину директиву ;) ежли очень надо то :



User-agent: *
Disallow: 

User-agent: Yandex
Disallow: 
Host: www.site.ru
show must go on !!!...
kapapapa
На сайте с 22.10.2009
Offline
44
kapapapa
#4

мне нужно для гугла и яндекса. А что такое *???

напишите плз, что вставить в txt, чтобы показать и гуглу и яндексу какая страница главная.

kapapapa добавил 25.10.2009 в 03:45

А чтобы для яндекса и гугла, то нужно так:

User-agent: *

Disallow:

User-agent: Yandex

Disallow:

Host: www.site.ru

User-agent: Google

Disallow:

Host: www.site.ru

я прав? или что-то опять напутал.

S
На сайте с 28.10.2005
Offline
314
semenov
#5 


User-agent: *

Disallow: 



User-agent: Yandex

Disallow: 

Host: www.site.ru
K
На сайте с 31.01.2001
Offline
737
Kost
#6

Топикстартер отправляется изучать ссылки в правилах раздела.

Тема закрывается.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий