Помогите решить проблему с Robots.txt

12
Антоний Казанский
На сайте с 12.04.2007
Offline
788
#11
strannik2 :
Может кто то сталкивался с подобной проблемой и знает как правильно нужно прописать, чтобы стрницы пагинации индексировались, а все остальные страницы со знаком ?  не индексировались. Подскажите пожалуйста.

Это задача решается не через robots.txt, а через canonical и мета.

1.

Как уже была правильно сказано выше, все страницы пагинаций должны содержать canonical на родительный раздел - адрес перед  ?PAGEN_1=*

2.

Также во все страницы пагинаций вы вставляете в код:

<meta name="robots" content="noindex, follow"/>


В результате, поисковые роботы будут следовать по страницам пагинации, но не индексировать и не учитывать их в ранжировании.

В robots.txt надо отсекать только явные служебные разделы и страницы, которые не должны участвовать в анализе поисковых роботов.


√ SEO продвижение ► https://akazansky.ru - экспертный аудит сайтов ( https://akazansky.ru/audit-sajtov ), внедрение эффективных решений цифрового маркетинга. Разговоры о SEO и не только: культурно, вежливо, доброжелательно ► https://t.me/seotusovochka
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий