bboriska

Рейтинг
23
Регистрация
22.09.2009
TF-Studio:
юзер-агент обязательно передавайте нормальный.

Спасибо за совет, но как раз без юзер агента спокойно 150 ключей парсит, хотя в будущем он потребуется, уверен, ещё раз спасибо.

---------- Добавлено 18.10.2012 в 00:19 ----------

Большое спасибо всем кто отозвался, вопрос исчерпан!

bukachuk:
Файл в какой кодировке ? Латиницей все также utf8 надо и urlencode не забываем

Да, это я на ночь глядя туплю, спасибо, сейчас напишу Вам в ЛС

P.S. У меня параметра curl_setopt($ch, CURLOPT_HEADER, 0); не было

bukachuk, да Ваш вариант с запросом на латинице работает, а вот с кириллицей не хочет ((

bukachuk:
google com/search?hl=ru&num=100&filter=0&safe=0&ie=UTF-8&oe=UTF-8&q=

такой запрос делаете?
ща пробывал 100 результатов

Вы через курл делали?

---------- Добавлено 17.10.2012 в 23:53 ----------

BOOT:
Могу поделится бесплатно готовым проектом под парсинг гугла.
Если проект действительно парсит ТОП100, то с удовольствием посмотрю и без пива Вас не оставлю )))
BOOT:
Кидайте мне запросы, я вам выдам выдачу по каждому запросу. у меня по 900-1000 ссылок с запроса парсится

Спасибо, но мне нужен скрипт, а не выдача. Готовы поделиться (не за бесплатно)?

Timen:
обязательно передавайте куки, которые получили при первом обращении.
тогда парсить станет значительно проще...

И куки передавал (может конечно не те, что нужно :) ). Кто-то вообще, в последнее время парсил ТОП100 одним запросом?

---------- Добавлено 17.10.2012 в 23:41 ----------

bukachuk:
Не понял вы результат от гугла выводите на экран и там 60 результатов в выдаче?
Да, именно это и смущает. Независимо от того, какой стоит ключ, всёравно не больше ТОП60. Читал (не помню где), что Гугл так борется с парсингом
bukachuk:
&num=100 в запросе укажите будет уже 100 на страницу за запрос, ну а там уже либо капчу пробивайте либо прокси

Да num=100 стоит, но не хочет давать 100, хоть убей

---------- Добавлено 17.10.2012 в 23:34 ----------

splish:
Задержку ставили?

Задержки и борьба с капчей полезна, чтобы не банили (с этим проблем нет), проверяю один единственный ключ (периодически меняю его, т.е. бана в принципе быть не может), в результате хочу получить ТОП 100, но не получается

Vladimir-spb:
Я тоже тратил ооооочень много времени, теперь не трачу, заказываю да и нах

ИМХО: Оптимальное решение для заработка на ГС

madstallion:
Яндекс. Работаю в основном с ним, так как в Гугле под фильтром жестко сижу с апреля.

За что фильтр?

Напишите платонам, что они у Вас отбирают любимое и жизненное ))))) Мне кажется это веская причина снять с него фильтр 😂

12
Всего: 15