Помогите решить проблему с Robots.txt

12
Антоний Казанский
На сайте с 12.04.2007
Offline
831
#11
strannik2 :
Может кто то сталкивался с подобной проблемой и знает как правильно нужно прописать, чтобы стрницы пагинации индексировались, а все остальные страницы со знаком ?  не индексировались. Подскажите пожалуйста.

Это задача решается не через robots.txt, а через canonical и мета.

1.

Как уже была правильно сказано выше, все страницы пагинаций должны содержать canonical на родительный раздел - адрес перед  ?PAGEN_1=*

2.

Также во все страницы пагинаций вы вставляете в код:

<meta name="robots" content="noindex, follow"/>


В результате, поисковые роботы будут следовать по страницам пагинации, но не индексировать и не учитывать их в ранжировании.

В robots.txt надо отсекать только явные служебные разделы и страницы, которые не должны участвовать в анализе поисковых роботов.


https://akazansky.ru - продуктовое SEO продвижение, аудиты, комплексное сопровождение для бизнеса • Продвижение от 20 тыс. / месяц • Почасовая нагрузка - 1200 рублей / час • Прозрачная пошаговая отчётность, долевые оплаты, гарантии.
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий