избегание дублей (301\302\404) для динамических страниц?

edogs software
На сайте с 15.12.2005
Offline
775
1674

Мы так поняли что поисковики не очень любят дубли страниц, или страницы с очень похожим контентом.

Однако на динамическом сайте этого практически не избежать, на страницу форума с одинаковым контентом, и то может быть до 10 ссылок (разные посты, просто ссылка на тему и страницу, вид для печати), даже здесь это наблюдается (как нам показалось).

Поэтому в своё время тестировали следующий способ - редирект скриптом по 301 на главную страницу для всех случаев когда дубль был не нужен. Для гугла вроде бы помогало.

Однако сейчас запустили сайт, с такой же системой редиректов, и яндекс бодро пробежался по всем страницам с 301 редиректом. Контент страницы выдавали вместе с редиректом на странице. До запуска сайтов в яндексе оставалась 1 страница проиндексированная (сайт долго не работал). Сейчас полно страниц и полно страниц тех самых которых пытались избежать. Такое впечатление что яндекс на это внимания не обратил.

Отсюда вопрос: если не сменить ли редирект для яндекса на 302 (будет временный редирект) или вообще может надо давать ему 404 (будет полно ошибочных страниц).

Или подскажите, пожалуйста, другое решение.

Разработка крупных и средних проектов. Можно с криптой. Разумные цены. Хорошее качество. Адекватный подход. Продаем lenovo legion в спб, дешевле магазинов, новые, запечатанные. Есть разные. skype: edogssoft
Dwarf
На сайте с 06.10.2004
Offline
60
#1

Версию для печати убрал из Гугла и Яндекса банальным

<meta name="robots" content="noindex,nofollow">

Страницы, которые после изменений в движке стали выдавать ошибки, убрались из индекса выдачей 404 по этим URL. Что интересно, в Гугле сначала попали в Supplemented results, и только потом удалились совсем.

Деревянные окна (http://www.wood-win.ru/)
edogs software
На сайте с 15.12.2005
Offline
775
#2
Dwarf:
Версию для печати убрал из Гугла и Яндекса банальным
<meta name="robots" content="noindex,nofollow">

Страницы, которые после изменений в движке стали выдавать ошибки, убрались из индекса выдачей 404 по этим URL. Что интересно, в Гугле сначала попали в Supplemented results, и только потом удалились совсем.

Спасибо. Вариант. Никогда не думали что яндекс обращает внимание на указания роботу:-\

По поводу 404, возникает вопрос.

Допустим есть страница на которой указано что её не надо индексировать, а по прямой ссылке с других сайтов - она выдаёт 404. То есть сделаем так как Вы и сказали.

Не сведется ли к нулю польза от ссылок с других сайтов на подобные страницы? Ведь они вернут 404, т.е. ссылка будет на несуществующее место, будут ли они давать бонус? Не уронит ли это сайт в результатах поиска?

Dwarf
На сайте с 06.10.2004
Offline
60
#3
edogs:
Спасибо. Вариант. Никогда не думали что яндекс обращает внимание на указания роботу:-\
По поводу 404, возникает вопрос.
Допустим есть страница на которой указано что её не надо индексировать, а по прямой ссылке с других сайтов - она выдаёт 404. То есть сделаем так как Вы и сказали.
Не сведется ли к нулю польза от ссылок с других сайтов на подобные страницы? Ведь они вернут 404, т.е. ссылка будет на несуществующее место, будут ли они давать бонус? Не уронит ли это сайт в результатах поиска?

Сугубо ИМХО: не рискнул бы выдавать в вашем случае 404. Скорее всего поставил бы 301 редирект.

Torio
На сайте с 25.06.2005
Offline
124
#4
edogs:
Не сведется ли к нулю польза от ссылок с других сайтов на подобные страницы? Ведь они вернут 404, т.е. ссылка будет на несуществующее место, будут ли они давать бонус? Не уронит ли это сайт в результатах поиска?

ИМХО: Можно сделать так: <meta name="robots" content="noindex,follow">. Тогда страница не проиндексируется, но вес (pr) передаст.

С уважением, Виктор. Тел: (905) 610-95-80
edogs software
На сайте с 15.12.2005
Offline
775
#5
Torio:
ИМХО: Можно сделать так: <meta name="robots" content="noindex,follow">. Тогда страница не проиндексируется, но вес (pr) передаст.

404 ответ по идее подразумевает отсутствие текста страницы, по крайней мере индексируемого. Зачем ему меты?

Или Вы имеете ввиду что вообще не делать 301\302\404 ?

Torio
На сайте с 25.06.2005
Offline
124
#6
edogs:
Или Вы имеете ввиду что вообще не делать 301\302\404 ?

Да. Просто запретить поисковику его смотреть, но ПЕРЕДАВАТЬ все остальное. Веди Вам это надо: спрятать страницу от индексации, но сохранить влияние ссылок на нее, а, соответственно, и на весь сайт?

edogs software
На сайте с 15.12.2005
Offline
775
#7
Dwarf:
Сугубо ИМХО: не рискнул бы выдавать в вашем случае 404. Скорее всего поставил бы 301 редирект.

Так не помогает, изначально 301 редирект и стоял.

Torio:
Да. Просто запретить поисковику его смотреть, но ПЕРЕДАВАТЬ все остальное.

Разумно, попробуем. Быть бы ещё уверенными что яндекс noindex учитывают:-\

Torio
На сайте с 25.06.2005
Offline
124
#8

Ответил в личку.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий