Отслеживания Мр. Гугла

M
На сайте с 27.12.2003
Offline
6
1325

Кто-нить посоветуйте как отслеживать googlebot.

Я слышал что можно поставить счетчик который будет показывать кокда googlebot пришел.

Насколько я понимаю, googlebot приходит 2 раза в месяц.

С помощью какого счетчика можно определить когда он пришел, чтоб сразу можно было поменять страницу ?

Спасибо.

:beer:

А
На сайте с 14.11.2003
Offline
150
#1
Как писал Mlin_!
Кто-нить посоветуйте как отслеживать googlebot.

На сервере должны вестись логи. Для Apache это access.log. Также необходим анализатор логов (webalizer, например).

Я слышал что можно поставить счетчик который будет показывать кокда googlebot пришел.

Ничего про это не слышал. У тех же Hotlog и Rax нет такой возможности.

Насколько я понимаю, googlebot приходит 2 раза в месяц.

Кто вам это сказал?! Ко мне, например, он приходит почти каждый день.

dimok
На сайте с 08.11.2002
Offline
291
#2
Я слышал что можно поставить счетчик который будет показывать кокда googlebot пришел

ага. вот тут слышал: Следим за визитами робота Google (googlebot) на сайт

делается это на php. Это как вариант, когда нет доступа к логам сайта или нет анализатора этих логов.

CLICKBAZA: есть траф - будут и деньги (https://clickbaza.com/)
C
На сайте с 13.01.2004
Offline
195
#3

Все еще проще!

Вот IP ботов:

crawl4.googlebot.com. 216.239.46.100 <1>

crawl4.googlebot.com. 216.239.46.102 <1>

crawl4.googlebot.com. 216.239.46.105 <1>

crawl5.googlebot.com. 216.239.46.112 <1>

crawl5.googlebot.com. 216.239.46.113 <1>

crawl1.googlebot.com. 216.239.46.12 <2>

crawl5.googlebot.com. 216.239.46.140 <3>

crawl7.googlebot.com. 216.239.46.163 <1>

crawl7.googlebot.com. 216.239.46.168 <1>

crawl7.googlebot.com. 216.239.46.183 <1>

crawl7.googlebot.com. 216.239.46.187 <1>

crawl8.googlebot.com. 216.239.46.192 <1>

crawl1.googlebot.com. 216.239.46.20 <2>

crawl1.googlebot.com. 216.239.46.21 <1>

crawl9.googlebot.com. 216.239.46.235 <1>

crawl1.googlebot.com. 216.239.46.26 <1>

crawl1.googlebot.com. 216.239.46.27 <1>

crawl2.googlebot.com. 216.239.46.36 <2>

crawl2.googlebot.com. 216.239.46.39 <3>

crawl2.googlebot.com. 216.239.46.45 <1>

crawl2.googlebot.com. 216.239.46.48 <1>

crawl1.googlebot.com. 216.239.46.5 <3>

crawl2.googlebot.com. 216.239.46.52 <1>

crawl2.googlebot.com. 216.239.46.55 <1>

crawl2.googlebot.com. 216.239.46.56 <1>

crawl4.googlebot.com. 216.239.46.96 <1>

crawl4.googlebot.com. 216.239.46.97 <1>

На PHP просто сверяется IP с приведенным списком, если совпадает, значит робот посетил страницу и суем ему какую нить гадость =) а остальным показываем нормальный сайт ГЫ

R
На сайте с 28.12.2003
Offline
4
#4
Как писал creation
На PHP просто сверяется IP с приведенным списком, если совпадает, значит робот посетил страницу и суем ему какую нить гадость =) а остальным показываем нормальный сайт ГЫ

IP ботов немного больше :) см. http://www.iplists.com/new/

остановите меня или я найду точку опоры
L
На сайте с 21.02.2003
Offline
13
#5

Когда-то мне сказал один добрый человек:

"Ничто не мешает боту ходить под другими IP и USER_AGENT'ами"

Поэтому клоакинг весьма рисковое мероприятие и приведёнными выше IP, я полагаю, работа не должна ограничиться.

Хотя как метод регистрации бота сойдёт. Но на мой взгляд

eregi("googlebot",$HTTP_USER_AGENT)

будет лучше использовать.

Don't worry, be happy... :smoke:
A
На сайте с 08.03.2003
Offline
203
#6
Как писал Mlin_!
Кто-нить посоветуйте как отслеживать googlebot.
Я слышал что можно поставить счетчик который будет показывать кокда googlebot пришел.

Насколько я понимаю, googlebot приходит 2 раза в месяц.
С помощью какого счетчика можно определить когда он пришел, чтоб сразу можно было поменять страницу ?

Спасибо.

🍻

закажи, чтобы тебе поставили отчет ... в системе Analog

если таковая у твоего хостинга водится ;)

Славгородский Алексей,
Ваш Партнер – создание и продвижение сайтов (http://vashpartner.ru/)
U
На сайте с 28.10.2001
Offline
109
#7

rjob, списки староваты...

Mlin_!, ты хотел сказать не 2 раза в месяц, а их (ботов) 2 типа, фреш и дип, сначала шарахается один, потом другой. а количество заходов бота пропроционально твоему ПР. бот может заходить и раз месяц, а может и по несколько сотен раз в сутки...

а для просмотра полной картины, никакие вебанлизеры и счетчики тебе не помогут, нужно строго логи смотреть.

дёшево хостим блоги здесь (http://sgmanaged.com/ru/) и тут-же наполняем их (блоги) контентом (http://republisher.ru)
A
На сайте с 10.03.2003
Offline
86
azh
#8

ulcer, а для просмотра полной картины, никакие вебанлизеры и счетчики тебе не помогут, нужно строго логи смотреть.

$host = gethostbyaddr($ip);

и не надо никаких логов

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий