Чем парсите Эфир?

A
На сайте с 12.09.2011
Offline
139
1715

Подскажите актуальный парсер эфира

https://yandex.ru/company/

Ищу работу помощником Вебмастера, долгое время занимался сайтами. https://t.me/fania008
Z0
На сайте с 03.09.2009
Offline
756
#1

Вы о каком эфире?

A
На сайте с 12.09.2011
Offline
139
#2
ziliboba0213:
Вы о каком эфире?

Этот https://yandex.ru/company/

Z0
На сайте с 03.09.2009
Offline
756
#3

/ru/forum/885359 это, не?

TOBBOT
На сайте с 04.11.2014
Offline
41
#4

Askara, не прощи ли здесь?

http://export.yandex.ru/last/last20x.xml
(открывать с пустым реферером, т.е. скопировали и вставили в адресную строку)

инструмент тоже есть http://tobbot.com/modules/yandex-last20-keywords/

Инструменты интернет-маркетинга - JLAB (http://jlab.io/) Бесплатная автоматизация с программой TOBBOT (http://tobbot.com/)
LiteCat
На сайте с 03.05.2007
Offline
236
#5

Офтоп: а зачем это надо? Собирать свой приблизительный Вордстат? Жаль, не по регионам(

mendel
На сайте с 06.03.2008
Offline
183
#6

Простите, а оно работает?

Лет пять назад помню было что там крутили выборку из двух миллионов запросов которые не менялись месяцами. Сейчас что-то изменилось?

Шутку любишь над Фомой, так люби и над собой. (с) народ. Бесплатные списки читабельных(!) свободных доменов (http://burzhu.net/showthread.php?t=2976) (5L.com) Сайты, All inclusive. 5* (/ru/forum/962215)
Prior
На сайте с 03.03.2008
Offline
184
#7
mendel:
Простите, а оно работает?
Лет пять назад помню было что там крутили выборку из двух миллионов запросов которые не менялись месяцами. Сейчас что-то изменилось?

Парсил для своих нужд для теста с год назад примерно - там запросы актуальные были 100% и их явно больше двух миллионов.

Ответы на вопрос - https://answers.net.pl
mendel
На сайте с 06.03.2008
Offline
183
#8
Prior:
Парсил для своих нужд для теста с год назад примерно - там запросы актуальные были 100% и их явно больше двух миллионов.

Да? любопытно. Надо будет попробовать заново. Лет 8-9 назад у меня много разных парсеров водилось) А таймингами не поделитесь случайно? В один поток с одного айпи с какими задержками можно парсить (ну или можно БЫЛО)? На глаз хоть?

TOBBOT
На сайте с 04.11.2014
Offline
41
#9
mendel:
Да? любопытно. Надо будет попробовать заново. Лет 8-9 назад у меня много разных парсеров водилось) А таймингами не поделитесь случайно? В один поток с одного айпи с какими задержками можно парсить (ну или можно БЫЛО)? На глаз хоть?

Вроде и не банит вовсе.

Prior
На сайте с 03.03.2008
Offline
184
#10
mendel:
Да? любопытно. Надо будет попробовать заново. Лет 8-9 назад у меня много разных парсеров водилось) А таймингами не поделитесь случайно? В один поток с одного айпи с какими задержками можно парсить (ну или можно БЫЛО)? На глаз хоть?

Да, я со всякими прокси не замарачивался, ставил в один поток на фон скрипт на локалке и он на фоне сутками работал и базу ключей собирал) По-моему задержки не ставил никакие - работало и без них.

Собственно, не проблема поделиться скриптом, может будет полезен кому)) хотя он простецкий совсем. Во вложении два файла - один сам парсер (скрипт сам для себя таблицы создаёт, надо только доступ прописать к базе данных). Ключи для удобства разбиваются на таблицы в зависимости от первой буквы ключа (иначе совсем уж большие таблицы получаются). Второй файл - скрипт, который позволяет сделать выборку из всех таблиц по вхождению заданной фразы.

Скорость парсинга что-то около 40 000 ключей в час (очень примерно).

Я для себя запускал, помнится, - сейчас в базе обнаружил что-то около 3.5 миллионов ключей, но это мелочи в общем-то, т.к. сейчас бесплатно раздают базы на миллиарды ключей)

zip keys.zip

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий