Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Запрет индексации

Nakhabino
На сайте с 04.10.2006
Offline
87
Nakhabino
291

Есть страница /shops.php, на ней много линков на магазины.

К этой страницы с сайта ведут много ссылок вида

/shops.php?catelems3=199&shops[]=69

Как правильно закрыть индексацию этих страниц?

Достаточно ли:

User-Agent: *

Disallow: /shops.php

Sla_Dom
На сайте с 18.02.2006
Offline
252
Sla_Dom
#1

Nakhabino, нет, не достаточно, ибо все страницы с разным id номером - разные и для человека и для поисковика

albion
На сайте с 07.10.2005
Offline
247
albion
#2

Sla_Dom, Вы не правы.

/ru/forum/comment/1921396

Читаем описание на формат robots.txt - он анализирует СОВПАДЕНИЕ части URL. Сработает.

и вся тема целиком: /ru/forum/125113

Nakhabino:
Есть страница /shops.php, на ней много линков на магазины.
К этой страницы с сайта ведут много ссылок вида
/shops.php?catelems3=199&shops[]=69

Как правильно закрыть индексацию этих страниц?
Достаточно ли:
User-Agent: *
Disallow: /shops.php

все нормально сработает.

Sla_Dom
На сайте с 18.02.2006
Offline
252
Sla_Dom
#3

albion, респект за поправку

Только стоило бы еще раз указать дополнение


Небольшое дополнение - части, с которой начинается URL:

Цитата:Disallow
The value of this field specifies a partial URL that is not to be visited. This can be a full path, or a partial path; any URL that starts with this value will not be retrieved.

http://www.robotstxt.org/wc/norobots.html#format

UXUkraine 2011: доклад Эрика Обзор тренинга «Лояльные клиенты Недавние исследования поведения пользователей

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий