Использующим серверный парсер Wordstat

12
natural born killer
На сайте с 06.10.2007
Offline
74
2686

Думаю, есть люди, которые используют серверный PHP-парсер Я.Wordstat. У меня к ним вопрос - выбивает ли вам капчу на каждый запрос?

У меня сложилось такое впечатление, что мой curl просто не хочет принимать cookies, хотя все файлы открыты для записи и опции прописаны. Когда иду через браузер - все ок, когда в браузере отключаю куки - выбивает капчу, как и в curl.

Кто сталкивался с проблемой? Парсить Магаданом, конечно, удобно, но больно уж медленно. Хотелось бы в пару десятков потоков

Блог Белого Негра (http://niggaslife.ru)
BredoGen.
На сайте с 19.10.2009
Offline
98
#1

Там уже давно не всё так просто.

Копайте в сторону:


<iframe frameBorder="0" src="http://kiks.yandex.ru/su/" style="width:40px;height:40px;overflow:hidden;position:absolute;left:-40px;top:0;opacity:0"></iframe>
natural born killer
На сайте с 06.10.2007
Offline
74
#2

Пока спасла прописанная кука "yandexuid=6081541431294991373; fuid01=4c83ac2335d3c447.jSvVt6h543bRoObsRA6oECJweFiD400y9y3WNSAh8yQtN6y7Hf5OpeJjsFUfmY_qF6MPcYnjtbUJ9neZfyx7-6vFKOcip7Jw_Jz578iIl7LmE046W763UfPxftmW6qZi; my=YwA=; L=Z2MPLGRfUlxCSGhGXkB/b0NRVQcEfWtDESZ/AF5bNkRtdA4oBXlfVGomAy5CETwFPCU5HwAALQ4cNnEqX0l+PA==.1295133021.8746.227910.aadd9184439a1f1affbb72152ca2797a; yabs-sid=2334683301295792152"

BredoGen.
На сайте с 19.10.2009
Offline
98
#3
natural born killer:
Пока спасла прописанная кука _

Там сессия же истекает. Лучше в начале парсинга ходить по урлу и забирать нужную куку.

response
На сайте с 01.12.2004
Offline
324
#4
natural born killer:
Думаю, есть люди, которые используют серверный PHP-парсер Я.Wordstat. У меня к ним вопрос - выбивает ли вам капчу на каждый запрос?

У меня сложилось такое впечатление, что мой curl просто не хочет принимать cookies, хотя все файлы открыты для записи и опции прописаны. Когда иду через браузер - все ок, когда в браузере отключаю куки - выбивает капчу, как и в curl.

Кто сталкивался с проблемой? Парсить Магаданом, конечно, удобно, но больно уж медленно. Хотелось бы в пару десятков потоков

Можно запустить пару десятков Магаданов 😂

Если не париться с айпишниками, никакая кука не спасет от бана, а судя по вопросу о куке, я думаю до сетки айпишников тут дело не дойдет.

Однопоточный парсер ключевых слов Магадан (http://magadanparser.ru) (со свистелками) Многопоточный парсер ключевых слов Солнечный (http://sunnyparser.ru) (без свистелок)
.:nbd:.
На сайте с 04.11.2008
Offline
98
#5

В свое время тоже корывялся с киком, но пара пакетов в фидллере подсказала в какую сторону копать :)

Дергать куки из браузера это панацея :D

Палю тему Дорген (/ru/forum/439165) + кеи + контент (http://datarama.biz/) + еще немного кеев и скриптов (http://amazingsoftware.ru/) = $$$ Мы делаем доры, а не пишем романы (c) один Дима рефка dino_spomoni (http://goo.gl/w62v3)
BredoGen.
На сайте с 19.10.2009
Offline
98
#6
.:nbd:.:
В свое время тоже корывялся с киком, но пара пакетов в фидллере подсказала в какую сторону копать :)

Никак не могу распарсить, что это за слово :)

p.s. а зачем из браузера дергать? сейчас же всё само получает-подставляет.

.:nbd:.
На сайте с 04.11.2008
Offline
98
#7
BredoGen.:
Никак не могу распарсить, что это за слово :)

p.s. а зачем из браузера дергать? сейчас же всё само получает-подставляет.

Фидллер - транслит названия зачетной тулзы =)

response
На сайте с 01.12.2004
Offline
324
#8
.:nbd:.:
Фидллер - транслит названия зачетной тулзы =)

фиддлер крутой, но хттп анализер еще круче :) а самый крутой - вайршарк! 🍾

В то же время, почти все по вордстату можно сделать в старом-добром проксомитроне :)

BredoGen.
На сайте с 19.10.2009
Offline
98
#9
.:nbd:.:
Фидллер - транслит названия зачетной тулзы =)

Какая извращенная штуковина. wireshark же (:

.:nbd:.
На сайте с 04.11.2008
Offline
98
#10
response:
а самый крутой - вайршарк! 🍾

Не ловит он пакеты на моей вафле =(

Какая извращенная штуковина.

Дело привычки =)

p.s. а зачем из браузера дергать? сейчас же всё само получает-подставляет.

Это был ответ на

Пока спасла прописанная кука "yandexuid=6081541431294991373; fuid01=4c83ac2335d3c447.jSvVt6h543bRoObsRA6oECJweFiD400y9y3WNSAh8yQtN6y7Hf5OpeJjsFUfmY_
qF6MPcYnjtbUJ9neZfyx7-6vFKOcip7Jw_Jz578iIl7LmE046W763UfPxftmW6qZi; my=YwA=; L=Z2MPLGRfUlxCSGhGXkB/b0NRVQcEfWtDESZ/AF5bNkRtdA4oBXlfVGomAy5CETwFPCU5HwAALQ4cNnEqX0l+PA==.1295133021.8746.227910.aadd9184439a1f1affbb72152ca2797a; yabs-sid=2334683301295792152"
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий