Обработка 404 ошибок

Федор Майков, вы сами обновляете базу недвижимости? Если да, и контент пишете уникальный, то одно дело. А если безответственные пользователи, то ваш контент на многих сайтах окажется..

За 301 фильтры? Позволю себе сильно усомниться в этой возможности

"Избыточное автоматическое перенаправление (редиректы). По возможности избегайте использования редиректов. Редирект может быть полезен только в том случае, если адреса страниц меняются по техническим причинам и необходимо перенаправить пользователя на новый адрес страницы." (с) Яндекс

я фик знает, достаточно ли у меня основания, что б вместо 404 отдавать 301

а насчет 3 вариант "Soft 404. Одна из распространенных ошибок заключается в замене сообщения об ошибке 404 (страница не найдена) для несуществующих страниц на страницу-заглушку, которая возвращается с кодом ответа 200 (ОК). В этом случае поисковая система считает, что страница с некорректным адресом существует, и не удаляет ее из своей базы. Это приводит к более медленному индексированию полезных страниц на сайте."

У нас не заглушка, но суть та же - страница останется в базе => замедлится индексация сайта.

тоесть всеравно придется вешать <meta name="robots" content="noindex, nofollow"/> на страницу

Федор Майков добавил 07-09-2011 в 17:09

Да ну бросьте, кто будет уник на базу недвижимости писать - это ж десятки тысяч объектов, которые сегодня утром появились, а к обеду уже уши в архив. Пока заморачиваешься с уником - квартиру уже снимут.

И я, собственно, не сильно парюсь по этому поводу - викимарт живет с неуник. и не жалуется.

Контент предоставляют риэлторы.

А может стоит Платону написать и его спросить - пусть выскажут официальную позицию.

Простите, а какой тогда смысл это в индекс совать, если активное оно меньше суток?

Dram, отписано, ждем ответа.

Федор Майков добавил 07-09-2011 в 17:52

Ну там не все объекты меньше суток актуальны - продажа долго висит. Аренда - какие то объекты долго, какие то нет. Тем не менее, мы не можем априорно определить описания каких объектов следует уникализировать, а какие оставить в исходном виде.

Да и вопрос, собственно, не в том что б страницы с временем жизни меньше суток в индекс загнать, а в том что б своими действиями не повлечь наложение фильтра или снижение скорости индексации сайта.

а не проще скрипт заказать, который будет 404 страницы в делурл совать? страницы пропадают в течение суток наверняка (может и раньше, не знаю).

Продвигал крупные сайты объявлений.

Не нужно мудрить, все просто. Не существующие страницы должны отдавать 404 Not Found. (хелп Яндекса, если кто забыл).

Так было настроено на двух крупных сайтах объявлений. Проблем не возникало. Поэтому рекомендую 404.

а что это за фильтр такой?

вот удивятся веб-мастера, которые полностью меняя структуру сайта (или CMS), и как следствие УРЛы ставили на старых страницах редиректы на новые

а у меня возникло. Сделали обновление базы, удалили несколько тысяч страниц, пришло письмо в вордстат об ошибках, попали под фильтр.

Федор Майков добавил 07-09-2011 в 18:37

Одно дело прописывать редирект при смене адресов страниц (переход на новую cms или другие адекватные причины. Сам ни раз прописывал и проблем не возникало), но другое - замена 404 на 301. Это подозрительно выглядит, поскольку страница для перенаправления одна.

Федор Майков добавил 07-09-2011 в 18:52

в случае когда у нас N cтраниц редиректят на одну, возникает ситуация, когда мы собираем трафик на множество страниц и сливаем его на одну. А кто его знает что у нас на этой странице, может там детское порно.

Буквально 2 месяца назад сама столкнулась с такой проблемой - продвигаемый интернет-магазин переместил полностью всю коллекцию в раздел "Распродажа", соответственно по старым урлам остались 404 страницы. Притом такие манипуляции с товаром клиент проделывает регулярно.

Вебмастер также ругнулся на резкое увеличение числа ошибок, стало страшно за траст сайта.

Решение выбрали такое - все 404 через специально написанный скриптик добавляются в robots - после максимум 3 апдейтов яндекс выкидывает страницы из индекса и соответственно вебмастера и благополучно о них забывает. Чистим robots.

Главное при выборе этого метода борьбы с 404 - не оставить внутренних ссылок на сайте на эти 404 (это тоже можно посмотреть в вебмастере).

У меня это прекрасно работает, сайт чувствует себя хорошо)

Удачи)