Чистка баз каталогов

B
На сайте с 16.11.2008
Offline
11
571

Как правильно чистить базы каталогов и с какой периодичностью?

Лично я иногда (около раза в месяц) проверяю базу на 200-ый ответ сервера и нахождение форм на сайтах. Может что-нибудь еще необходимо делать? Делитесь опытом, мнениями.

ПРОДАЮ (/ru/forum/376388) САЙТЫ-САТЕЛЛИТЫ С АККАУНТАМИ В SAPE + САМИ ДОМЕНЫ! 10 доменов (из них в SAPE - 7) - всего за 1000 рублей. ICQ 896-846. Персональный аттестат (https://passport.webmoney.ru/asp/certview4.asp?wmid=415784481911).
[Удален]
#1
bogdarts:
Как правильно чистить базы каталогов и с какой периодичностью?

Ручками и глазками. Смотреть после каждого прогона, что попало в плохо и позже.

B
На сайте с 16.11.2008
Offline
11
#2

Не всегда каталоги, попадающие в плохо и позже - плохие. При маленькой пропускной способности канала возникают ошибки DNS, затем не у всех каталогов прописана строка успешной регистрации, повторной регистрации - эти все попадают в позже и плохо. Недавно заметил еще одну очень интересную ошибку, когда каталоги пишут что мол, мы знаем что это пишет не человек, а робот, поэтому отказываем вам. Видимо по User-Agent определять начали...

[Удален]
#3
bogdarts:
Не всегда каталоги, попадающие в плохо и позже - плохие.

А я и не говорил, что они плохие... а только то, что их надо проверять ручками. Не помешает их повторно загнать в автомат (вдруг со второго раза пролезут), а те что остались уже и смотреть. Все эти проверки на ответ и пр. они по сути мало что дают, а больше множат ошибки, т.к. страница добавления может переехать на другой адрес, может быть временно недоступна и пр. Тут можно ещё много чего сказать, но лень.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий