Сбор информации о ссылках

!FrykT
На сайте с 14.05.2007
Offline
120
1430

Да-да, речь идёт о сборщике ссылок, обычном пауке, который будет собирать:

- анкор ссылки

- дата нахождения ссылки роботом

- история смена анкора

- куда ссылаемся, откуда ..ит.д.

При этом текст можно вообще не сохранять, ну разве что только окружающий текст ссылки.

Будет ли актуален сервис, который бы предоставлял информацию о ссылках? Отличие от бэков в Yahoo будет в том, что информация будет более расширенной, чем-то схожей с анализом ссылок в Yazzle.

Progr@mmer\.
На сайте с 14.10.2007
Offline
44
#1

Про анализ язла не знаю, поэтому спрошу: что там такого специфического?

Вашей девушке не хватает романтики? Черпните её на сайте «Я Люблю Романтику» (http://iloveromantics.ru/). Романтический форум (http://forum.iloveromantics.ru/) для отдыха от нудной работы.
d&d
На сайте с 07.12.2006
Offline
56
d&d
#2

!FrykT, а Вы хотите скрипт написать?

Мне бы пригодился такой сервис.

[Удален]
#3
!FrykT:
Да-да, речь идёт о сборщике ссылок, обычном пауке, который будет собирать:
- анкор ссылки
- дата нахождения ссылки роботом
- история смена анкора
- куда ссылаемся, откуда ..ит.д.
При этом текст можно вообще не сохранять, ну разве что только окружающий текст ссылки.

Будет ли актуален сервис, который бы предоставлял информацию о ссылках? Отличие от бэков в Yahoo будет в том, что информация будет более расширенной, чем-то схожей с анализом ссылок в Yazzle.

+1

ТС, сервис, имеющий свою независимую статистику интернета (или хотя бы рунета) будет востребован. Если вам по силам сделать быстрый краулер с вдумчивым сбором статистики и её анализом - это отличная возможность сделать оригинальный интернет-проект.

Dolph
На сайте с 08.04.2008
Offline
215
#4

давно думаю над подобной темой. Только одним скриптом тут не обойтись :)

Серверов несколько штук надо и много траффика. Этож надо парсить весь рунет, да ещё и БД ссылок держать, почти поисковик получается

RuCaptcha.com ( http://www.RuCaptcha.com ) отечественный капча-сервис 20-44 руб за 1000 решений ($0,61 максимум!) на простые капчи ReCaptcha V2/V3/Invis, FunCaptcha, HCaptcha, GeeTest, Capy, KeyCaptcha
[Удален]
#5

Dolph, в этом ты прав, задача масштабная, однако есть в ней очень интересные моменты. Сам бы с удовольствием занялся, но на РНР писать краулер не очень-то правильно. Его надо писать на С++ или на другом, но обыкновенном языке программирования, дабы скорость работы приложения была высокая.

Dolph
На сайте с 08.04.2008
Offline
215
#6
claygod:
Его надо писать на С++ или на другом, но обыкновенном языке программирования, дабы скорость работы приложения была высокая.

ИМХО - лучше взять старый открытый движок поисковика и урезать его под свои нужды

Ruba777
На сайте с 29.02.2008
Offline
315
#7

ТС будет тебе всеобщий респект и уважение. Добрая часть форума станет периодически захаживать на твой сайт. Можно сделать платный доступный сервис. Например 1-2 доллара заплатил и пользуйся сколько хочешь. А в бесплатной версии ограничение поставить не более 5 запросов в сутки с одного айпишника

Отличные мобильные прокси https://mobileproxy.space/?p=10969
V
На сайте с 13.03.2007
Offline
28
#8

Да, такой сервис будет актуален

Специалист

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий