Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

как убрать из индексирования дубляжи страниц с помощью robots.txt

R1

0

ruukki1

1 ноября 2015, 08:36

310

Подскажите пожалуйста как убрать из индексирования дубляжи страниц с помощью robots.txt

Основная страница для индексирования

http://ruukkiroof.ru/links/otoplenie-i-gazosnabzhenie/radiatory-stalnye/

Дубляжи страниц

http://ruukkiroof.ru/links/otoplenie-i-gazosnabzhenie/radiatory-stalnye/s5/t0/

http://ruukkiroof.ru/links/otoplenie-i-gazosnabzhenie/radiatory-stalnye/p0/s4/t0/

http://ruukkiroof.ru/links/otoplenie-i-gazosnabzhenie/radiatory-stalnye/p0/s3/t0/

и.т.д.

Как можно убрать дубляжи в robots.txt ?

Карта сайта загружена

http://ruukkiroof.ru/links/sitemap.xml

http://ruukkiroof.ru/sitemap.xml

19

Jan-Go

2 ноября 2015, 08:36

#1

Попробуйте добавить

Disallow: */t0/

И проверьте на всякий случай robots в вебмастерке после этого.