Как закрыть в роботс

169

NeoDesign

22 мая 2015, 16:46

352

Как закрыть в роботс.txt страницы вордпресса с комментариями (дубли).

В роботсе уже задано:

Disallow: /wp-comments

Disallow: */comments

Но все-равно в индексе находятся страницы (главная и с комментариями):

и так далее - сколько страниц комментариев к материалу, столько и страниц с дублями в индексе.

Почему так происходит, ведь в роботсе вроде как комментарии закрыты? Как указать директиву, чтобы подобные дубли с комментариями не индексировались?

BG

195

BrightGuy

22 мая 2015, 16:53

#1

Disallow: */comment*

-= Сайты на заказ | Правки, обновление, работы по DLE =- ( /ru/forum/791118 ) Telegram: @ruslansh ( tg://resolve?domain=ruslansh )

169

NeoDesign

22 мая 2015, 16:57

#2

BrightGuy:
Disallow: */comment*

Благодарю!

596

Had

22 мая 2015, 18:28

#3

А можно и так:

Disallow: */comment

Данная директива запретит индескировать любые ссылки в которых есть слово comment