Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Помогите в Роботс

12
[Удален]
1148

Ребят как запретить индексацию яндексом и гуглом именно 1 страницы, вот такого вида:

http://www.myhost.ru/ru/home.html

Я правильно сделал ?

User-Agent: *

Disallow: www.myhost.ru/ru/home.html

или для яндекса нужно прописывать User-agent: Yandex ?

h-i-t-m-a-n
На сайте с 14.11.2007
Offline
125
h-i-t-m-a-n
#1

User-Agent: *

Disallow: /ru/home.html

User-Agent: Yandex

Disallow: /ru/home.html

Host: www.myhost.ru

iren K
На сайте с 28.12.2008
Offline
222
iren K
#2
adgento:
Ребят как запретить индексацию яндексом и гуглом именно 1 страницы, вот такого вида:

http://www.myhost.ru/ru/home.html

Я правильно сделал ?


User-Agent: *
Disallow: www.myhost.ru/ru/home.html

или для яндекса нужно прописывать User-agent: Yandex ?

правильней так(для яндекса):

User-agent: Yandex

Disallow: /ru/home.html

c уважением Iren
S
На сайте с 28.10.2005
Offline
318
semenov
#3

Есть замечательная страница http://help.yandex.ru/webmaster/?id=996567

[Удален]
#4

понял, благодарю всех

K
На сайте с 31.01.2001
Offline
737
Kost
#5
adgento:
яндексом и гуглом

User-agent: Yandex

User-agent: Googlebot

Disallow: /ru/home.html

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 28.10.2005
Offline
318
semenov
#6

Чорный юмар?

orphelin
На сайте с 02.07.2006
Offline
261
orphelin
#7
Kost:
User-agent: Yandex
User-agent: Googlebot
Disallow: /ru/home.html

уже и так можно?

K
На сайте с 31.01.2001
Offline
737
Kost
#8
orphelin:
уже и так можно?

Почему "уже"? С 1994 года можно. Почему юмор?

Ну вы, блин, даете. Читайте первоисточники, в них сила.

The record starts with one or more User-agent lines, followed by one or more Disallow lines, as detailed below. Unrecognised headers are ignored.

Ссылка есть в FAQ этого раздела, совсем обленились. И ведь что характерно, один 5 лет на форуме зареген, а другой 6.

Рунету - 25 лет! FAQ по новым условиям Google обновляет Условия использования
iren K
На сайте с 28.12.2008
Offline
222
iren K
#9
adgento:
Ребят как запретить индексацию яндексом и гуглом именно 1 страницы, вот

Вы можете также запретить через метатег noindex:

<meta name="robots" content="noindex">

.. стобы не лезть в роботс..))

orphelin
На сайте с 02.07.2006
Offline
261
orphelin
#10

Kost, а есть примеры сайтов с такими роботсами?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий