Как банить сайты?

alexf2000
На сайте с 15.10.2004
Offline
79
1192

Есть ли какие-то методы автоматизации бана сайтов для поисковика? Судя по тем действиям, которые вручную приходится делать чтобы найти скажем дорвей и забанить его - всё это должно хорошо поддаваться автоматизации...

Самый интересный SEO-блог (http://alexf.name)
S
На сайте с 21.05.2006
Offline
3
#1

Видимо, кое-что из детекта почтового спама подойдет, тот же байесовский фильтр например. "Прозвоны" главных страниц на наличие джава-скрипт и вб-скрипт редиректов. Только надо понимать, что без полного парсинга скрипта всегда будут ситуации неотлавливаемые. Впрочем, можно придумать набор правил для отлова подозрительных и давить их в ручном режиме. Потом какие-нибудь алгоритмы для отлова сайтов, в массов порядке продающих ссылки, колец и прочая.... Только это все достаточно ресурсоемко. По-крайней мере, анализ ссылок уж точно требует больших затрат.

alexf2000:
Есть ли какие-то методы автоматизации бана сайтов для поисковика? Судя по тем действиям, которые вручную приходится делать чтобы найти скажем дорвей и забанить его - всё это должно хорошо поддаваться автоматизации...
greenwood
На сайте с 08.09.2003
Offline
519
#2

я бы да-же сказал, что забанить сложнее чем оптимизировать сайт ..... конечно если "жертва" сделана грамотно

alexf2000
На сайте с 15.10.2004
Offline
79
#3

Из того что мне в голову пришло. Самый простой способ, это искать слова xanax и casino (foreclosure/viagra, пар можно много подобрать) на одной странице, если они там есть, то понятно что мы нашли. :) Тут можно отправлять в бан всю часть сайта до последнего слеша в урле - не ошибёшься. :)

E
На сайте с 27.08.2005
Offline
15
#4

Слишком обширная тема, чтобы ответить на поставленный вопрос. Но для поисковика, обладающего небольшими мощностями вдаваться в анализ контента вообще нет смысла. Надо анализировать ссылки для отбора кандидатов на ручной анализ и бан.

Тот же трастранк подойдет.

Vetra
На сайте с 07.04.2005
Offline
200
#5
alexf2000:
сть ли какие-то методы автоматизации бана сайтов

Есть. Более того это это работает с августа прошлого года у Яндекса, а у Гугли имхо намного раньше появилось.

pelvis
На сайте с 01.09.2005
Offline
345
#6

по id домена в базе, а автоматом запрещаете определенные сайты к выдаче. Для этого делается поле в таблице БД, где записывается параметр.

Продаю вывески. Задарма и задорого (https://www.ledsvetzavod.ru/)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий