Если сайт на PHP, то ищите просто PHP программиста.
Повесите задание на крон у будете обновлять прайс раз в сутки.
$25 мне кажется весьма достаточно, т.к. большой квалификации не треубется.
p.s. ко мне не обращаться.
а что парсить нужно?
у них вроде как простая нумерация сайтов проектов: 6 цифр.
все данные в html коде страниц.
на TOBBOT можно за день собрать базу по всем доменам. Нужен только модуль ;)
Для меня один из плюсов bootstrap в том, что элементы нормально смотрятся с настройками по умолчанию. Так зачем тогда вырезать что-то?
Чтобы поддерживало IE8 добавьте:
<!-- HTML5 shim and Respond.js for IE8 support of HTML5 elements and media queries --> <!-- WARNING: Respond.js doesn't work if you view the page via file:// --> <!--[if lt IE 9]> <script src="https://oss.maxcdn.com/html5shiv/3.7.2/html5shiv.min.js"></script> <script src="https://oss.maxcdn.com/respond/1.4.2/respond.min.js"></script> <![endif]-->
может файл занят другим приложением.
вбей в гугле
site:example.com "китайское порно"
Мануал:
- берете карту сайта и выдираете оттуда адреса всех страниц;
- загоняете полученный список в TOBBOT (с модулем SE Index Checker);
- анализируете результат.
Согласен, что форма, где нужно только вставить адрес сайта удобнее, но что делать ;)
С первого по 70000-ый вам гугл так просто и не отдаст.
Уточняющими запросами вы можете фильтровать (уменьшать) кол-во результатов, но собирать все равно только 1000 шт.
Допустим вы сделали 500 уточнящий запросов к запросу с 70к результатов. Собрали таким образом 500 * 1000 страниц. Затем удаляете дубликаты и получаете, например, 35000 уникальных результатов. Т.е. вам удалось вытащить половину от того, что нашел гугл.
Как видите ничего сложного, просто нужно попрактиковать в составлении уточнящих запросов и выбрать хороший парсер.
Сейчас в тренде пироги. И либо ты переходишь на темную сторону и принимаешь все возможные риски, либо остаешься за бортом.
Добавлять уточнения к запросам: номера, слова, даты... да все что угодно.
Потом просто удалять дубли из результатов.
Чекать индексацию страниц (доменов, ссылок) в поисковых системах Bing, Google и Яндекс можно бесплатной программой TOBBOT ☝
