Блокировка парсеров ссылок...

Ссылки-то видно, вопрос в их количестве :) Часть ссылок на одном зеркале, часть на другом и т.д.

Вообще, речь идет в первую очередь от трудозатратах на выяснение всех нюансов.

Про анализ ценности, как донора, речь не идет.

это вообще на раз вычисляется :)

Поступали следующим образом:

1) создание случайной ссылки видимой только для бота.

2) уведомление, с ip о заходе на эту страницу

3) проверка и блокирование диапазона провайдера.

Tamerlan, а потом ссылка скармливается яше ;)

burunduk, и что будет такого страшного если ПС бот пройдет по "битой" ссылке? :)

И второй момент, как отловить бота, но под дейстивительным юзер-агентом?

Тоже элементарно, даем ему код на исполнение js, не смог, опять делаем проверку на вшивость.

Когда сайтов много, а база обновляется постоянно никаких трудностей нет.

клоакинг :)

и как вы определите что код был исполнен?

тем более роботы пс его то же не исполнят

По вторичному запросу.

Роботы ПС может и не исполнят (Гугл под вопросом), но они и браузером прикидываться не станут.

да ну :)

а что мешает мне представиться Яшей, вы все их IP знаете?

Через RIPE принадлежность сети Яндексу определить проблем не составит.

burunduk, по порядку.

Нет не клоакинг, а "ошибка верстальщика", никакая ПС не будет накладывать санкции за то, что "картинка наехала на ссылку".

Код страницы одинаков, что для ПС, что для юзера.

Это очень просто, показать пример?

И? бан происходит вручную whois сразу покажет левый это ип или нет.

Более того, у нас есть специальные сайты для отловли, модераторов различных сервисов ЯН. Иногда такие удивительные вещи всплывают :)