По 20 доменов за раз не очень удобно для меня было бы.
Т.к. при поиске взломанных сайтов я использовал поселедовательные запросы:
- наличие надписи This site may...
- поиск ВЧ спам кеев (viagra, cialis, casino и др.) в кеше гугла,
- сравнение (кеи, ссылки) кеша гугла и исходников страницы,
- проверка на наличие редиректа при запросе страницы с User-Agent-ом гугл бота и браузера,
- проверка на клоакинг (различие ответа сервера при налачии реферера поисковой системы гугли и без нее).
все это можно сделать на базе TOBBOT.
Dinozavr,
немного поправлю Safe Browsing API (v3)
Какая скорость чека через API? На ограничения по частоте запрсоов не натыкались?
Делал подобное на базе программы TOBBOT. Для вашей задачи подойдет идеально. Нужны только SOCKS прокси, чтобы многопоточно проверять большие списки.
От сеошников не утаишь )
cache:/ru/forum/936652
Первый однозначно лучше. Вызывает больше доверия.
Второй, я так понимаю, попытка сделать адаптивный дизайн. Имхо, попытка не удачная.
Добрый вечер,
если есть сервис(ы) откуда можно выдрать такие данные, то могу сделать.
seozm, могу сделать модуль для программы TOBBOT под ваши задачи. Либо же регулярно предоставлять готовую информацию. Вам решать что для вас удобнее.
seozm, P1otr, чтобы сориентировать вас по цене мне нужно больше данных: урл сайта источника, какие данные собирать, что делать с полученными данными (сохранять в файл для импорта, либо же публитковать сразу на вашем сайте и т.д.).
Лучше обращайтесь напрямую в скайп: tobbot.com или аську: 690530614. Где мы обсудим детали (цену, сроки) дальнейшего сотрудничества.
Пополнение счета не облагается налогом. Хотя хз как оно выглядит (в смысле банковская операция) при пополнении с ВМ. Да и квиточков нет никаких.
Предлагаю быстрый и недорогой парсинг информации / фото / видео с сайтов с формированием CSV, XML файлов для импорта.
Обращайтесь!
Конечно. SSL не проблема.
попробуйте TOBBOT.
за основу можно взять модуль URL Check
У модуля открытый код. В текущем виде он выглядит так:
// отключаем редирект T.disable("REDIRECT"); // делаем запрос к странице сайта resp = T.makeRequest("GET", T.get("url")); body = T.encode(resp.body, resp.charset); // в переменной body содержится содержимое страницы (HTML код) // его то нам и нудно проанализировать if (body.contains(T.get("string"))) { T.set("result", "YES"); } else { T.set("result", "NO"); } T.done();
Как видите язык довольно простой. Любой JavaScript (да и не только) программист сможет внести правки.
При желании можно добавить запись отчетов о проверке во внешний файл:
T.write("D:/report.htm", T.get("url") + " ссылка найдена", "a");
