парсер яндекса

A2

4

a1b2c3

9 октября 2008, 19:29

953

как быстро можно парсить выдачу яндекса с одного ИП, так чтобы не забанил?

п.с. канал очень быстрый, не хочется попасть на грабли.

130

Антон Каленик

9 октября 2008, 19:42

#1

прокси используй

A2

4

a1b2c3

9 октября 2008, 19:47

#2

желательно без прокси.

130

Антон Каленик

9 октября 2008, 19:51

#3

тогда паузы между запросами, иначе думаю никак.

M

112

mrr

9 октября 2008, 20:00

#4

6 секунд = 6000 миллисекунд

за это время точно не забанит

130

Антон Каленик

9 октября 2008, 20:05

#5

+ паузу желательно делать рандомной

A2

4

a1b2c3

9 октября 2008, 20:08

#6

mrr:
6 секунд = 6000 миллисекунд
за это время точно не забанит

это переходы между страницами с результатами 1 2 3 4 5 6 7 8 ... ?

кажеться слишкой большой промежуток.

188

Margo

9 октября 2008, 20:20

#7

a1b2c3:
это переходы между страницами с результатами 1 2 3 4 5 6 7 8 ... ?

кажеться слишкой большой промежуток.

не большой, нормальный...но как уже говорили лучше делать разные промежутки, но все равно "ты робот" будет иногда показываться, поэтому это тоже нужно как то учесть

[Удален]

9 октября 2008, 20:27

#8

Рандомно 4-10 сек не банит, если делать от 3 сек - банит :)

7

vid0k

9 октября 2008, 21:11

#9

yandex xml там вроде можно до 500 запросов в сутки с одного ай пи

Безлимитный трафик, 1Гб под сайт за 45 рублей! (http://best-hoster.ru/order/host.php?uid=7407&bid=1)

112

T0][@

9 октября 2008, 22:28

#10

vid0k:
yandex xml там вроде можно до 500 запросов в сутки с одного ай пи

1000 в сутки, нужно регить аккаунт на xml.yandex.ru и закидывать свою IP

если не запалят, хоть 50 аккаунтов регьте и меняйте вручную IP на след. аккаунт, как 1000 запросов "истечет" :)

...

В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов

Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта