Закрытие страниц пагинации в Robots.txt

SF
На сайте с 12.11.2011
Offline
103
2939

Доброго времени суток, возникла проблема - надо закрыть страницы пагинации.

Страницы имеют виду site.ru/cat/2(3,4,5).

Как бы все это закрыть через роботс тхт?

дани мапов
На сайте с 06.09.2012
Offline
204
#1

Все страницы закрыть

Disallow: /cat/

Если надо первую открыть, а остальные закрыть, то через robots.txt не получится. Можно такое сделать в движке с помощью мета-тега robots.

Написание и доработка скриптов (PHP, MySQL, JavaScript, jQuery) (/ru/forum/811046)
SF
На сайте с 12.11.2011
Offline
103
#2

Disallow: /cat/ - если закрывать подобным образом, то все новости из категории так же закроются. Нужно только страницы пагинации.

P
На сайте с 03.09.2014
Offline
19
#3
SniFFeRok:
Доброго времени суток, возникла проблема - надо закрыть страницы пагинации.
Страницы имеют виду site.ru/cat/2(3,4,5).
Как бы все это закрыть через роботс тхт?

http://help.yandex.ru/webmaster/controlling-robot/html.xml#canonical

ну или все таки через роботс:

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#allow-disallow

Яндекс не Тимошка, видит немножко.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий