Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Запрет индексации части сайта

12
W
На сайте с 28.03.2012
Offline
0
Wattt
536

Есть сайт, где информация группирована по категориям и подкатегориям.

Например:

сайт.ру/принтеры/

сайт.ру/принтеры/профессиональные/

сайт.ру/принтеры/любительские/

сайт.ру/мониторы/

сайт.ру/мониторы/профессиональные/

сайт.ру/мониторы/любительские/

и т.д.

Хочу закрыть от индексации всю информацию в подкатегориях всех категорий. Правильно ли я понимаю, что для этого нужно прописать в robots.txt так:

=====================================

Disallow: /профессиональные/*

Disallow: /мониторы/любительские/*

=====================================

Каталоги сайта так можно закрыть от индесации. А можно ли закрыть таким образом именно ссылки?

[Удален]
#1

Если не будет индексироваться подкатегория, то наверное и ссылки тоже не будут, хотя...

W
На сайте с 28.03.2012
Offline
0
Wattt
#2
Сергей Чубарев:
Если не будет индексироваться подкатегория, то наверное и ссылки тоже не будут, хотя...

Я думал зведочка на конце как раз для этого служит, чтобы закрыть все страницы по данному разделу!

El_grapaduro
На сайте с 01.09.2008
Offline
315
El_grapaduro
#3

Звездочку не нужно. Указываете папку и все, что в этой папке будет закрыто.

Disallow: /профессиональные/

Disallow: /любительские/

W
На сайте с 28.03.2012
Offline
0
Wattt
#4
El_grapaduro:
Звездочку не нужно. Указываете папку и все, что в этой папке будет закрыто.
Disallow: /профессиональные/
Disallow: /любительские/

На всякий случай уточню, "профессиональные" и "любительские" - это всего лишь часть ссылки, в виде физических папок они не существуют. Меня как раз это и смущает. :)

El_grapaduro
На сайте с 01.09.2008
Offline
315
El_grapaduro
#5

Будет закрыты страницы "профессиональные" и "любительские" и все что идет далее из них.

Что бы закрыть только эти страницы надо написать знак доллара вконце.

Disallow: /профессиональные/$

Disallow: /любительские/$

cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#6
Wattt:
Каталоги сайта так можно закрыть от индесации. А можно ли закрыть таким образом именно ссылки?

Таким образом, т.е. в robots.txt ссылки закрыть нельзя.

Иван Чередов (http://ivan.cheredov.com/about/)
W
На сайте с 28.03.2012
Offline
0
Wattt
#7
El_grapaduro:
Звездочку не нужно. Указываете папку и все, что в этой папке будет закрыто.
Disallow: /профессиональные/
Disallow: /любительские/

Понял. Спасибо ответ!

cheredov:
Таким образом, т.е. в robots.txt ссылки закрыть нельзя.

Я уже понял, что надо писать без звездочки. Спасибо!

cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#8
Wattt:
Я уже понял, что надо писать без звездочки. Спасибо!

Да как бы звездочка тут ни при чем... 😕

W
На сайте с 28.03.2012
Offline
0
Wattt
#9
cheredov:
Да как бы звездочка тут ни при чем... 😕

Тогда я совсем запутался. :(

Вроде El_grapaduro написал, что закрыть станицы "профессиональные" и "любительские" можно так:

Disallow: /профессиональные/

Disallow: /любительские/

Если так нельзя, как тогда закрыть часть страниц сайта, имеющие в ссылке определенный текст (профессиональные или любительские).

cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#10

Вы же сами пишите:

Wattt:
Каталоги сайта так можно закрыть от индесации. А можно ли закрыть таким образом именно ссылки?

Disallow: /*/профессиональные/$ - закрывает все, что заканчивается на /профессиональные/

Индексацию же ссылок, ведущих на эти разделы или страницы закрыть можно, но совсем другим способом. Вам, вероятно, это вообще не нужно. Ссылка на страницу и страница - разные вещи.

---------- Добавлено 28.03.2012 в 19:42 ----------

Wattt:
На всякий случай уточню, "профессиональные" и "любительские" - это всего лишь часть ссылки, в виде физических папок они не существуют. Меня как раз это и смущает.

Не смущайтесь, это одно и то же в вашем случае.

Google будет строже контролировать Яндекс.Вебмастер поможет найти дубли Яндекс.Поиск для сайта: дополнительный
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий