Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Правильное написание директивы Allow

A2
На сайте с 24.12.2008
Offline
126
andrey_20
629

В robots.txt прописали

User-agent: *

Allow: /

Disallow: /rubrika/10/

Host: сайт.ru

Sitemap: http:сайт/sitemap.xml

Хотели написать, что разрешаем индексировать весь сайт, за исключением страниц сайт/rubrika/10/

Возник спор, правильно ли написали? Именно Allow: /

Жду помощи.

[Удален]
#1

В данном конкретном случае вы написали бред сивой кобылы. То что без дизаллоу и так в аллоу.

A2
На сайте с 24.12.2008
Offline
126
andrey_20
#2

А правильно написать сможете?

[Удален]
#3

Прочитайте хелп в конце концов. Она просто тупо не нужна тут.

A2
На сайте с 24.12.2008
Offline
126
andrey_20
#4
Miha Kuzmin (KMY):
Прочитайте хелп в конце концов. Она просто тупо не нужна тут.

Если не можете написать правильно, то надо было написать: "умею только болтать, хотите почитать мою болтавню".

Кто знает, как написать точно, напишите. Не закрыт ли сайт в моем варианте?

[Удален]
#5
andrey_20:
Если не можете написать правильно, то надо было написать: "умею только болтать, хотите почитать мою болтавню".
Кто знает, как написать точно, напишите. Не закрыт ли сайт в моем варианте?

С третьего раза для особо альтернативно одаренных, которые не могут прочитать хелп. Аллоу нужна для открытия чего-то закрытого. Сайт по умолчанию для индексации открыт. Понятно? Хотя, врядли.

A2
На сайте с 24.12.2008
Offline
126
andrey_20
#6
Miha Kuzmin (KMY):
С третьего раза для особо альтернативно одаренных, которые не могут прочитать хелп. Аллоу нужна для открытия чего-то закрытого. Сайт по умолчанию для индексации открыт. Понятно? Хотя, врядли.

Зачем тогда тут это? http://prntscr.com/9tukzi

AS
На сайте с 18.01.2015
Offline
68
AlexShevchenko
#7
andrey_20:
Если не можете написать правильно, то надо было написать: "умею только болтать, хотите почитать мою болтавню".
Кто знает, как написать точно, напишите. Не закрыт ли сайт в моем варианте?

я думаю, что любой, кто знает что такое роботс.тхт - прочитав "хелп", сможет написать правильно.

Фарма блог (http://luckydrug.com/)
[Удален]
#8
andrey_20:
Зачем тогда тут это? http://prntscr.com/9tukzi

Вот для одаренных, что не могут хелп прочитать.

---------- Добавлено 23.01.2016 в 21:23 ----------

AlexShevchenko:
я думаю, что любой, кто знает что такое роботс.тхт - прочитав "хелп", сможет написать правильно.

Топик подтверждает обратное.

Zegeberg
На сайте с 30.09.2010
Offline
306
Zegeberg
#9

User-agent: *

Allow: /rubrika/10/

Disallow: /rubrika/

Disallow: /cache/ или что там у вас за CMS

Crawl-delay: 5

Host: сайт.ru

По сути,

Allow /rubrika/10/ - разрешить индексить каталог /rubrika/10/ (исключение)

Disallow: /rubrika/ - запретить индексить каталог /rubrika/ (всё, кроме 10/ запрещено для индекса).

Ссылки с форумов, блогов и соц сетей ( https://forumok.com/p/c1710b6b/ ) Создание, настройка и ведение РК Директ
Новые стандарты для директивы Яндекс внес изменения в OpenAI разрешила сайтам закрывать

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий