Как взять контент СЕРПа для анализа?

124

Torio

11 декабря 2005, 17:36

963

Блин, уже долго бьюсь над этим вопросом - масса сервисов работает, но хочу понять как???

Вот всеми методами стандартными попробовал Яшкину первую страницу с выдачей взять - с локали все работает, а вот у хостера идет запред по айпишнику... :(

Многие разработчики столкнулись с этим? Как это можно обойти?

ЗЫ: ошибка 403 выдается...

С уважением, Виктор. Тел: (905) 610-95-80

124

Torio

11 декабря 2005, 17:38

#1

Может как-то можно сокет привязать к текущему айпи выхода в сеть? Эмулировать обычного пользователя?

Естественно, в личку. Дабы не смущать работников поисковиков. ;)

153

Коля Дубр

11 декабря 2005, 23:32

#2

Пробуй так:


<?
$str = file_get_contents('http://SERP');
?>

Про запрет по IP впервые слышу. Никогда таких проблем не возникало. Какой-то хостер неправильный.

Разрабатываю общую шину (http://habrahabr.ru/company/floxim/blog/268467/) помаленьку. ...а еще у меня есть бложек (http://www.blogovo.ru/).

124

Torio

12 декабря 2005, 15:57

#3

>> Про запрет по Ip впервые слышу. Никогда таких проблем не возникало. Какой-то хостер неправильный.

Коля, реально Яндекс защищает себя от попыток посмотреть его выдачу. Не веришь? Проверь свой код не на локали.

Если б все было так просто я б, наверное, не спрашивал как это сделать! :)

Опубликован Реестр провайдеров хостинга Баги Гугл поиска и 1 день - 1

T

33

Trispo

12 декабря 2005, 16:35

#4

Torio:
Может как-то можно сокет привязать к текущему айпи выхода в сеть? Эмулировать обычного пользователя?
Естественно, в личку. Дабы не смущать работников поисковиков. ;)

В этом случае весь траф пройдет через пользователя, который может сидеть и на оптике, и .... на модеме.

254

Mr_Promoter

12 декабря 2005, 16:35

#5

Попробуй с другого ip от другого провайдера - сейчас многие дают месяц бесплатного хостинга или с бесплатного хостинга на худой конец. У меня например без проблем fopen'ом открывает.

http://webpromote.ru (http://webpromote.ru) - пописываю иногда ...

T

33

Trispo

12 декабря 2005, 16:42

#6

Torio:
Блин, уже долго бьюсь над этим вопросом - масса сервисов работает, но хочу понять как???

В основном через proxy ;)

303

antono

12 декабря 2005, 16:45

#7

На агаве не дает такого сделать, а с локалки без проблемм.

С

10

Странник

20 декабря 2005, 21:48

#8

Torio:
Блин, уже долго бьюсь над этим вопросом - масса сервисов работает, но хочу понять как???

xml.yandex.ru

S

76

soda

21 декабря 2005, 05:39

#9

видимо кто то до вас пошаманил крепко на хостинге,

попробуйте через прокси дергать выдачу

я трогал интернет за яйца.

200

Vetra

21 декабря 2005, 06:36

#10

soda:
видимо кто то до вас пошаманил крепко на хостинге,

Я. за это быстро прощает. минут 5-30 обычно надо подождать.

Torio:
Проверь свой код не на локали.

Все замечательно с сервера работает.

В 2023 году Одноклассники пресекли более 9 млн подозрительных входов в учетные записи

Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы