Возможен ли разбор HTTP_USER_AGENT при помощи строковых функций, регулярных выражений с последующим точным определением поисковик это или нет без использования заранее заготовленного списка HTTP_USER_AGENT поисковиков? Или же без сравнения с заранее заготовленным списком HTTP_USER_AGENT или IP, требующим постоянного обновления обойтись нельзя?
Ну разберете Вы его, а дальше то что? Не совсем понял... Без списка бота можно определять только по поведению :)
mzr: А ты посмотри на проиндексированные яндексом площадки. По моим подсчетам уже около 20% выкинули из индекса, и процесс идет.
Хмм.. Тото я смотрю, унесло меня с пятой на 13 -тую позицию... Не ужели из за clx? Я вроде как раз все именно в озаглавленном рекламном блоке держу... А если не секрет, за что это Я ополчился на clx? За накачку тИЦ-а ?
Переформулирую.
Возможен ли разбор HTTP_USER_AGENT при помощи строковых функций, регулярных выражений с последующим точным определением поисковик это или нет без использования заранее заготовленного списка HTTP_USER_AGENT поисковиков? Или же без сравнения с заранее заготовленным списком HTTP_USER_AGENT или IP, требующим постоянного обновления обойтись нельзя?
Ну разберете Вы его, а дальше то что? Не совсем понял... Без списка бота можно определять только по поведению :)
И HTTP_USER_AGENT тут ни причем.
В Я полно сайтов, на которые вообще никто не ссылается из его же базы...
А ты посмотри на проиндексированные яндексом площадки. По моим подсчетам уже около 20% выкинули из индекса, и процесс идет.
Хмм.. Тото я смотрю, унесло меня с пятой на 13 -тую позицию... Не ужели из за clx? Я вроде как раз все именно в озаглавленном рекламном блоке держу... А если не секрет, за что это Я ополчился на clx? За накачку тИЦ-а ?