Массовая проверка трастовости линков

NV
На сайте с 30.09.2008
Offline
34
1743

Требуется проверить большой (~100,000) список линков на предмет их "трастовости"

Конечная цель: отбраковать внешние ссылки с нашего сайта, которые пользователи оставляют в комментах.

В идеале по каждому проверяемому линку хотелось бы получить такую инфу (в порядке убывания важности):

1) тематическая категория - например: adult, gambling, warez, drugs,

2) наличие malware

3) Наличие сайта в индексах google, yandex

4) PR страницы (данного линка), ТИЦ сайта

Проверять нужно не только рунет, а весь интернет.

Реализуема ли такая задача? Хотя бы частично... Пусть даже платно.

Может у антивирусников есть базы данных "плохих" страниц/сайтов?

Или у ссылочных бирж. Или у каких-нибудь контент фильтров для "безопасного браузинга"?

Спасибо за любые советы!

Regis
На сайте с 08.06.2010
Offline
116
#1
Рерайт, копирайт, размножение статей (/ru/forum/882369) Студия контента re-write.ru (http://re-write.ru/). Готовые статьи (7000+) (https://dl.dropboxusercontent.com/u/75608963/stati.xlsx)
wikism
На сайте с 14.09.2010
Offline
43
#2

еще можно проверить траст в Яндексе с помощью xtool

Вы можете разместить постоянную ссылку (/ru/forum/602698) на трастовом сайте по хорошей цене! Консультанты-профессионалы ждут ваших вопросов (http://wikism.net/) >Платная и бесплатная консультация для вашего сайта (/ru/forum/608670)<
F
На сайте с 16.01.2010
Offline
267
#3
Regis:
Массовая проверка тИЦ и PR

..........

Не забывайте, что за один запрос можно узнать тИЦ и PR для не более чем 50 веб-ресурсов.
a.chibisov
На сайте с 11.11.2010
Offline
42
#4
wikism:
еще можно проверить траст в Яндексе с помощью xtool

+1 Этот вариант ТСу подходит больше всего :)

я занимаюсь этим, потому что только учусь... как научусь - найду новое занятие...
shabash
На сайте с 02.05.2008
Offline
97
#5
wikism:
еще можно проверить траст в Яндексе с помощью xtool

Сервис выдает полный бред

Часто г.сайтам выдает показатель больше чем у нормальных СДЛ

wikism
На сайте с 14.09.2010
Offline
43
#6

shabash, бывает и такое. Однако следует использовать правило: машина это хорошо, а человек лучше - т.е. слепо верить всяким анализаторам имхо нельзя :-)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий