Белый список сайтов для Sape и не только

Что имеется в виду? Я говорил про общее число внешних с донора и, желательно, динамику их изменения. Отслеживать внешние на каждой странице - действительно, довольно затратно.

Поэтому Ваши аналогии хромают. ;)

Общее количество ссылок с сайта (а не одной страницы) показывает Bing. Если взять отношение количества ссылок с сайта к количеству страниц в Bing, то можно получить некий коэффициент. А уж как его использовать, решает каждый сам в силу своего опыта.

Идея использовать доноры с топовых сайтов - бестолковая.

1. На разные сайты, одни доноры по разному влияют.

2. Если даже 10% ссылок на анализируемый сайт сработали, остальные 90 - мусор. При 3000 сайтах их бэки, как писали, просто будут списком случайных площадок сапы.

sni, нет, тс сделал выборку из самых часто встречающихся доноров у топовых сайтов.

Как бы мысль здравая,но много но...

Кол-во вс все равно будет у всех одинаков. Просто где то проданы уже все места, а где то ни одного еще. Поэтому парсим несколько и берем максимальное кол-во за основу.

Там зачастую неактуальные данные.

А зачем нужно знать все ссылки от первой до последней? Достаточно примерного количества. Да и если проскочат несколько сайтов, что за беда. Как известно, предел, как и идеал, недостижим.

Зонк в своё время говорил, что у Бинга уж слишком редко обновляются эти данные. Т.е. уровень примерности - неприемлим. :)

Вышло обновление. В этот раз удалось набрать 5.5 тыс. доноров.

посмотрите исходящие ссылки с нужных сайтов на solomono.ru

на данный момент актуальность данных менее 1 месяца