Форум Сайтостроение Статистика и аналитика

Зачем говорить Li о поисковиках?

A
На сайте с 20.04.2006
Offline
5
Anatolievich
1469

Никто не знает, зачем при приходе на сайт поисковика

Открывать сокет вот с этим:

host45.rax.ru:80

посылать ему вот это: 


POST /cgi-bin/robot.cgi HTTP/1.0

Host: host45.rax.ru

Content-type: application/x-www-form-urlencoded

Content-length: 79

Connection: close



url=www.***.ru%2Fspider_check.php&useragent=&site=***.ru

и в ответ получать вот это: 


-1HTTP/1.0 200 OK

Server: 0W/0.7n

Date: Fri, 28 Apr 2006 07:52:36 GMT

Content-Type: text/html; charset=windows-1251

cache-control: no-store

content-language: ru

pragma: no-cache

vary: Accept-Language



<HTML><BODY><CENTER><H1>OK</H1></CENTER></BODY></HTML>

Случайно нашел на сайте, с которым сейчас работаю :)

То есть в принципе понятно, чтобы роботов не считал, но я нигде не встречал такой возможности...

Продажа японских автомобилей с автоаукционов Японии (http://www.tron.ru)
MK
На сайте с 02.05.2005
Offline
165
m@ksim
#1
Anatolievich:
То есть в принципе понятно, чтобы роботов не считал

Наоборот - чтобы считал.

Если к сайту обращается робот поисковика, то скрипт, вставленный в страницы сайта, посылает на li сообщение, что страница сайта просмотрена роботов поисковика, потом можно просмотреть отчет об индексации сайта поисковиками. Если страницу просматривает не поисковик, то скрипт ничего не посылает.

A
На сайте с 20.04.2006
Offline
5
Anatolievich
#2
m@ksim:
... потом можно просмотреть отчет об индексации сайта поисковиками...

Где это можно посмотреть?

D . G .
На сайте с 27.05.2005
Offline
151
D . G .
#3

1234567890

D . G .
На сайте с 27.05.2005
Offline
151
D . G .
#4
Anatolievich:
Где это можно посмотреть?

внутри статистики ли.ру. в своем акке.

http://www.liveinternet.ru/spider_check.html

A
На сайте с 20.04.2006
Offline
5
Anatolievich
#5

Вот это я посмотрел: http://www.liveinternet.ru/spider_check.html . Это хорошо. Но где ж мне на результаты жизнедеятельности этого робота посмотреть?

Вот по этому http://www.liveinternet.ru/stat/site.ru/spider_check.html адресу ничего не получается...

MK
На сайте с 02.05.2005
Offline
165
m@ksim
#6

Anatolievich, "экспресс-аудит", "Просмотр страниц поисковыми системами"

A
На сайте с 20.04.2006
Offline
5
Anatolievich
#7
m@ksim:
Anatolievich, "экспресс-аудит", "Просмотр страниц поисковыми системами"

thx. Побежал смотреть.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий