Откуда боты грузят сайты?

LebedevStr
На сайте с 17.08.2011
Offline
140
584

Коллеги. По мере индексации сайта, следили за ботами, с каких стран они идут?

Интересуют ответы вебмастеров у которых проекты в УА нете.

Спасибо.

siv1987
На сайте с 02.04.2009
Offline
427
#1

В основном из УА и идут. Хотя разные бывают

Mish-ka
На сайте с 08.06.2011
Offline
414
#2
LebedevStr:
Интересуют ответы вебмастеров у которых проекты в УА нете.

У меня много проектов в УАнете.

Ничего не грузится ботами.

Вы о какой нагрузке говорите?

Серч уже не торт => https://se.guru
LebedevStr
На сайте с 17.08.2011
Offline
140
#3

Наверное выразился не так.

Имелось в виду боты которые индексируют сайт.

Mish-ka
На сайте с 08.06.2011
Offline
414
#4
LebedevStr:
Имелось в виду боты которые индексируют сайт.

А не все ли равно?

Есть какой-то трабл в индексации?

LebedevStr
На сайте с 17.08.2011
Offline
140
#5

Да, не все равно :)

Нет, нету.

vpupkin97
На сайте с 27.09.2012
Offline
26
#6

Честно говоря, никогда не надо было подобной информации.

Но можно создать скрипт - логгер и фиксировать IP-шники и user-agent-ы посетителей. Насколько мне известно, у ботов user-agent-ы не стандартные. Отфильтровать необходимые записи и по IP определять страну уже.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий