Частота обращения к Яндексу, чтобы не было бана?

12
humbert
На сайте с 16.03.2006
Offline
540
1074

написал для себя сервис проверки сайтов в яндексе (pr, беки, страницы в индексе). С какой частотой можно обращаться к поисковику, чтобы IP не попал в бан?

Парсинг прайс-листов, наполнение интернет-магазина товаром. (https://humbert.ru) Любая CMS (Битрикс, OpenCart, Prestashop и даже Woo Commerce )
A
На сайте с 12.04.2007
Offline
9
#1
humbert:
написал для себя сервис проверки сайтов в яндексе (pr, беки, страницы в индексе). С какой частотой можно обращаться к поисковику, чтобы IP не попал в бан?

Если будете пользоваться этим сервисом сами. То Вам хватит.

seo.adman.com: покупка/продажа ссылок, рекламный брокер (http://seo.adman.com) vads.adman.com: свой рекламный брокер за 5 минут (http://vads.adman.com)
humbert
На сайте с 16.03.2006
Offline
540
#2

adman, а если сайтов 1000?

LS
На сайте с 16.01.2007
Offline
104
#3

сначала будет бан на сутки :) ...

со своего web сервера делать большое количество запросов не рекомендую, запускайте с динамики и все будет в порядке ..

yandex.ru
humbert
На сайте с 16.03.2006
Offline
540
#4

Lestor_SB, Что значит большое число запросов? Допустим 200 запросов в час выдержит? А 500? Или всего 10?

[Удален]
#5

Из практики, ставил в своем скрипте рандомную задержку между запросами от 10 до 40 секунд, затем проверял индексацию более чем 400 ссылок, процесс шел 2-3 часа (вроде бы :) ), каждый день в течение нескольких месяцев. Думаю заданный период 10 - 40 сек был с большой перестраховкой, не пробовал, но думаю должно хватить 5-10 сек, т.к. было озвучено что ПС переваривают около 500 запросов в сек, на яшу приходится минимум половина, так что думаю все должно быть ок.

Эксперимент сразу на сервере ставить тоже не советую ☝

R
На сайте с 03.05.2007
Offline
25
#6

Аналогичный вопрос.

Lestor_SB:
сначала будет бан на сутки :) ...
со своего web сервера делать большое количество запросов не рекомендую, запускайте с динамики и все будет в порядке ..

Но как запускать с динамики? я не могу менять IP своего сервера. Может есть какие динамичные прокси...но наверняка скорость/стабильность на доступных серверах отстой.

Где взять сервер с динамичным IP???

LS
На сайте с 16.01.2007
Offline
104
#7

сервер с динамикой ... эх, прокси и все такое, не забивайте себе голову, поднимите у себя на машине апач и долбите яшу (как правильно сказали выше - с рандомом) с провайдерского ИП (который в большинстве случаев меняется) .. и тоды и 1000 запросов будет просто шуткой :) ибо за провайдерским ИП может скрываться целая подсеть с сотнями пользователей ...

в Москве к примеру, народ долбит яшу с МТУ-шных ИП (стримовских) за милую душу, и банили, и чего только не было, а толку - новый день - новый ИП :)

humbert
На сайте с 16.03.2006
Offline
540
#8

Lestor_SB, у меня выделенный IP, как же его поменять?

LS
На сайте с 16.01.2007
Offline
104
#9

бесплатно - из дома на ночь скрипт запускайте .. или там тоже выделенный?

ладно .. вот вам: :)

покупаете хост за 1$ .. дальше понятно? платный прокси все равно дороже обойдется и до кучи яша будет видеть что это прокся :) а тут полная гармония :) ...

albion
На сайте с 07.10.2005
Offline
247
#10
humbert:
Lestor_SB, у меня выделенный IP, как же его поменять?

перепешите программу и пользуйтесь xml.yandex.ru и не будет бана.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий