Что делать с устаревшими дубликатами на доске объявлений?

Зачем чем вам мешают дубликаты?

1. Какое то время Вам будет хотеться сохранять все объявления (кол-во страниц, НЧ запросы, и т.д.). Это правильно и нормально. Пусть всё лежит - хуже не будет.

2. Потом (в зависимости от скриптов - с 100.000-500.000 объявл.) Вам начнёт мешать огромная масса - будет вешать базу, глючить, тормозить при поисках. Удаляйте на автомате старые, которым квартал-полгода-год (решите на месте, по обстоятельствам).

3. Если доска служит для показа рекламы по НЧ (Адсенс и т.д.) - встройте скрипт, блокирующий удаление обьявления с высокой посещаемость. У меня когда то в Гугле вылезло на 5ю позицию объявление по запросу "car insurance quote" и висело месяца четыре между 5 и 17 поз. Представляете, если б его скрипт удалил? 🙅

Слышал, что для поисковых систем нездорово, когда на сайте присутствует много страниц с одной и той же информацией. Например, у меня есть проект-каталог, в нем есть разные опции сортировки записей (например, по алфавиту, по дате добавления, по популярности) - все страницы с сортировками, отличными от сортировки по умполчанию, я закрыл для индексации. Но там это было сделано изначально, а здесь ситуация несколько иная - удалять информацию из индексов не сразу, а через некоторое время. Хочется понять, как это лучше сделать (свои пришедшие в голову варианты - в первом сообщение), ну и стоит ли, конечно. Ваше мнение - не стоит?

Mr. Third добавил 10.04.2009 в 22:21

Вы говорите о чисто технических проблемах, которые могут возникнуть в связи с большим количеством объявлений. Давайте представим, что технических проблем нет, и поговорим о проблемах "поисковых". Разве это нормально, когда в индексе поисковика будут сотни дубликатов (отличющихся незначительно или вообще только датой размещения, так как многие пользователи публикуют объявления методом copy-paste) сотен объявлений?

Или еще можно вопрос развернуть по-другому, совсем забыть про дубликаты и спросить так:

Допустим принято решение устаревшие данные (число которых ежедневно исчисляется сотнями страниц) из индексов изымать. Как это грамотнее делать - сносить и выдавать 404-ю ошибку или ставить noindex? Это ничего, что на сайте с точки зрения поисковика будет постоянное добавление-удаление многих страниц?

Отдавайте страницу, на которой есть сообщение, что данное объявление больше не существует, и есть навигация на разделы доски.

Делайте так, как удобнее пользователю - а поисковик сам с остальным разберётся.

Относительно новых/старых страниц не беспокойтесь - в мире доски объявлений исчисляются тысячами, на многих из них происходит такое же, в алгоритмах поисковых систем это наверняка предусмотрено. Гугль вообще любит, когда идёт постоянное обновление...

Не страшно, хотя доску загаживают изрядно. Помогает проверка количества объявлений в сутки от одного юзера - отсеевает 80% спама.

Спасибо за Ваше мнение.

Я имел в виду, что многие пользователи имеют текст объявления сохраненным локально, например в файле Word, и с разрешенной периодичностью (скажем, раз в несколько дней) просто заходят на доску и создают объявление методом copy-paste из своего вордовского файла в форму отправки. И таких практичных пользователей много. Отсюда, собственно, и рождаются точные дубликаты. Убедить пользователей не создавать новые объявления, а актуализировать ("поднимать") старые, как показывает практика, нереально.

Это у Вас пользователи хорошие. Мои индусы каждый по 30 объявлений в день пихают, автомат их банить не успевает...

Да нечего плохого нет в том что у вас есть одинаковые страницы.

У меня так сотни сплогов на ВП живут.