Индексация сайта по пейджингу

PC
На сайте с 07.07.2013
Offline
1
888

Вопрос для гуру, как закрыть в robots страницы пейджинга avto/ferrari=2013?page=2, т.е если не нужна индексация page=2 page=3 и т.д в каждом разделе каталога, как в таком случае закрывать их?

O0
На сайте с 28.12.2012
Offline
51
#1

в robots.txt впишете Disallow: /*?* и тогда все страницы в которых будет "?" буду закрыты от индексации.

Это как правило страницы пагинации, фильтрации...

Либо можно также присвоить этим страницам рел каноникал на родительскую категорию, но из индекса это их не уберут.

Лучше всего сделать 1 и 2 вариант вместе.

Белый Ум
На сайте с 27.04.2009
Offline
251
#2
в robots.txt впишете Disallow: /*?* и тогда все страницы в которых будет "?" буду закрыты от индексации.

не делайте так!!!!!

Опишите подробнее, что вам необходимо? почему страницы не в индексе должны быть?

Skype: shum_beliy
O0
На сайте с 28.12.2012
Offline
51
#3
Белый Ум:
не делайте так!!!!!

Опишите подробнее, что вам необходимо? почему страницы не в индексе должны быть?

в смысле не делайте так?

совершенно очевидно, что это страницы пагинации которые похожи друг на друга и распознаются ПС как дубли.

Академик... ещё и репу минуснул.

Белый Ум
На сайте с 27.04.2009
Offline
251
#4

oz0n3, /*?* - этим шаблоном вы можете весь сайт к индексации запретить. Откуда вы знаете, какая там структура url?

emariaru
На сайте с 26.10.2010
Offline
73
#5

Disallow: /*page=*

Disallow: /*?* действительно, закрывать нельзя, не обязательно у них ЧПУ

PC
На сайте с 07.07.2013
Offline
1
#6
Белый Ум:
не делайте так!!!!!

Опишите подробнее, что вам необходимо? почему страницы не в индексе должны быть?

Страницы похожи, это листинг товаров в каждом разделе и подразделе каталога, скорей всего они будут восприниматься как дублирующийся контент.

emariaru:
Disallow: /*page=*

Disallow: /*?* действительно, закрывать нельзя, не обязательно у них ЧПУ

Честно говоря - везде ЧПУ, просто в каталоге они без .html

сами страницы каталога выглядят таким образом:

avto/ferrari=2013?page=2

airplanes/boing=747?page=3

поэтому не совсем понятно, как закрывать именно те, где появляется page=2, page=3 и т.д.

WebAlt
На сайте с 02.12.2007
Offline
266
#7
PremiumClick:

...поэтому не совсем понятно, как закрывать именно те, где появляется page=2, page=3 и т.д.

Вам выше написали уже:

Disallow: /*page=*

PC
На сайте с 07.07.2013
Offline
1
#8
WebAlt:
Вам выше написали уже:
Disallow: /*page=*

А раздел обязательно указывать, например, Disallow: /ferrari/*page=* или достаточно Disallow: /*page=* и это будет распространяться на все разделы и подразделы каталога?

Y
На сайте с 28.11.2009
Offline
34
#9
PremiumClick:
А раздел обязательно указывать, например, Disallow: /ferrari/*page=* или достаточно Disallow: /*page=* и это будет распространяться на все разделы и подразделы каталога?

Раздел не нужно указывать, т.к. символ * перед page уже включает в себя все разделы и подразделы.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий