Форум Практика оптимизации Любые вопросы от новичков по оптимизации

как найти информацию на непроиндексированном сайте?

Анатолий
На сайте с 13.03.2009
Offline
138
Анатолий
414

Есть

сайт - чужой, большой (типа форум).

На сайте в неопределенный момент в неопределенном месте должна появиться некая информация определенной формы (например, номер веб-мани кошелька) узнать которую можно будет по маске.

Нужно

десктопная программа (или онлайн-сервис), которая будет бегать по этому сайту и искать это слово.

При нахождении - немедленно сообщить, выдать это слово, запомнить его (чтоб не выдавать снова) и бежать искать следующие подобные.

Понятно

что ни о каком Яндекс и Гугль поиске речь не идет. Выгрузка всего сайта для локального поиска - тоже не выход.

Критично

время поиска. Поэтому этот паук должен быть не только шустрым, но и умным - т.е., например, определять, что на какой-то странице произошли изменения и сразу бежать туда. Ну и ессно не жрать зря трафик - т.е., не ходить на страницы, на которых уже был, но которые не менялись.

ПС

Спасибо за предложения в личке, но проект не коммерческий... так - мелочи по карманам потырить.

Пишу на любые темы, в т.ч. и на сложные технические (https://t.me/Pisar1). Стоимость: от 100р./1000сп +- Готов рассмотреть Ваши предложения и выполнить небольшое тестовое задание. Примеры моих статей: ------------------- https://dzen.ru/media/pisec/gerwin--eto-iipisec-realnyi-pomoscnik-i-konkurent-dlia-kopiraiterov-63acb833886e17677f48b4b7 https://nag.ru/news/20989 https://nag.ru/material/20822 http://habrahabr.ru/post/254609/

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий