Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Вопрос о роботс.тхт

stasnokia
На сайте с 19.06.2008
Offline
149
stasnokia
374

Имеется сайт на дле. Хочу закрыть от индексации некоторые дубли. К примеру есть категория files, video, у них копии files/page/1 и video/page/1 , также и у главной есть site.ru/page/1. Я хочу закрыть вообще все существующие /page/1 (но чтобы page/2,3 и т.д остались).

Верно ли я думаю, что для этого достаточно прописать

Disallow: /page/1?

Заранее благодарен за ответ.

DO
На сайте с 20.01.2010
Offline
55
dustyo_O
#1

Disallow: /page/1 закрывает от индексации /page/11, например. и много других неожиданных вариантов еще может закрыться.

Кроме того, это не закрывает, например /files/page/1, тут нужда структура со звездочкой, которую понимают не все поисковики (и опять же, плохо контролируемая)

лучше сделайте по другому - все ссылки на /page/1 подмените ссылками на корень категории, а с соотвествующих страниц сделайте 301 редирект на корень категории

платно проведу аудит сайта и исправлю все технические проблемы, которые могут мешать продвижению (/ru/forum/594052)
Редирект устаревших беклинков интернет-магазина: Как в моем случае Что значит дропы?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий