Форум Поисковые системы Яндекс

ip-адреса ботов яндекса

12
K
На сайте с 26.10.2011
Offline
46
kovyilin
#11
SolloTwo:
Да, спасибо, а ты собирал чисто для себя или от нефиг делать?

Пожалуйста ;)

Собирал и продолжаю собирать (обрабатываю логи apache через php + AWK :) ) для анализа того - кто ходит, когда ходит, какие страницы смотрят, кто реально бот, кто выдает себя за бота и т.д. Считаю примерный трафик, сопоставляю с нагрузкой на сервер, если необходимо кого-то блокирую, кому-то ставлю Crawl-Delay и т.д. Если IP уже "засветился" ранее как бот, я повторно не делаю ему Reverse DNS Lookup (экономлю время).

Плодятся процессы httpd и Грабят сайт, как обнаружить Ограничить Yahoo доступ к
L
На сайте с 30.10.2015
Offline
34
levchernenko
#12

http://www.adress-ip.com/ip_moteur.php

...
V2
На сайте с 20.01.2021
Offline
0
Vitya202145qwer
#13
colorito #:

У zTDS в папке database есть списки IPшников поисковых систем

За актуальность, правда, не ручаюсь

Прямая ссылка на скачивание

Ccылка не работает))
Можно подробнее узнать об проэкте zTds 
Может кто то помочь с доступом ?

Dunno Watsgoinon
На сайте с 17.10.2014
Offline
79
Dunno Watsgoinon
#14
Vitya202145qwer #:

Ccылка не работает))
Можно подробнее узнать об проэкте zTds 
Может кто то помочь с доступом ?

два последних поста в чате https://t.me/z_tds

Виталий Литвинов
На сайте с 08.05.2008
Offline
117
Виталий Литвинов
#15

Диапазоны IP-адресов, используемых Яндексом

Диапазоны IP-адресов, используемых Google.

Диапазоны IP-адресов, используемых Яндексом
  • yandex.ru
v4 and v6 IP address ranges, prefix, Yandex networks
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий