Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Отличие запроса поисковиков

DG
На сайте с 18.02.2007
Offline
65
Denis Gorby
406

Здравствуйте.

Скажите, пожалуйста, есть ли способ отличить запрос поискового робота от обычного запроса браузера?

Заранее спасибо.

K
На сайте с 31.01.2001
Offline
737
Kost
#1

В 99.9% случаев - да, по User-agent, а если этого недостаточно, то еще смотреть IP-адрес.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
DG
На сайте с 18.02.2007
Offline
65
Denis Gorby
#2
Kost:
В 99.9% случаев - да, по User-agent, а если этого недостаточно, то еще смотреть IP-адрес.

Спасибо. Существует ли какой-нибудь публичный список User-agent-ов популярных поисковиков? Я, конечно, поищу и сам, но, возможно, есть какой-нибудь известный и надежный источник?

Заранее спасибо.

DG
На сайте с 18.02.2007
Offline
65
Denis Gorby
#3

Вопрос, близкий по тематике:

Можно ли быть уверенным, что у робота поисковика признак поддержки JavaScript-а будет сброшен?

Заранее спасибо.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий