Форум Практика оптимизации Doorways & Cloaking

Ищу скрипт

12
G
На сайте с 12.04.2009
Offline
3
gamarjoba
1279

Подкиньте скрипт проверки сайта на предмет посещения роботом ПС.

Кому не жалко, заранее благодарю.

LA
На сайте с 03.06.2008
Offline
105
lord_alfred
#1

[пиар]В Super Pack'е есть такая функция ;)[/пиар]

booch
На сайте с 06.03.2007
Offline
125
booch
#2

Можно логи мониторить. А можно заинклудить файл проверки реферера, и если это реферер одного из ботов, то передавать эту инфу владельцу

Идея года! Такого в онлайн играх ещё не было. (http://ams-ter.mybrute.com) Перспективный блог (http://seoamster.ru)
HD
На сайте с 13.04.2009
Offline
20
Holy Diver
#3

Подкидываю: awstats, на любом уважающем себя хостинге он установлен.

Чёрный балахон не спасёт тебя от страшных снов! Имею ответы на ваши вопросы. Пишите.
Madness_Lvov
На сайте с 22.05.2008
Offline
54
Madness_Lvov
#4

Holy Diver, на бесплатных говнохостингах даже логов не дают, не то что awstats

gamarjoba, скрипт записи зашедших на сайт в файл log.txt, можеш в нем ботов поискать потом ;)


<?php
$request_url = $_SERVER['HTTP_HOST'] . $_SERVER['REQUEST_URI'];
$new_record = $_SERVER['REMOTE_ADDR'].' ['.date("d.m.Y") .' '.date("H:m:s").'] "GET '.$request_url.'" "'.$_SERVER['HTTP_USER_AGENT'].'"';
$new_record2 = $new_record."\r\n";
$file_log = fopen("log.txt","a");
fputs($file_log, $new_record2);
fclose($file_log);
?>

Желательно сначала создать пустой файл log.txt в корне с правами на запись/чтение

Он будет такого формата потом:


71.56.193.11 [14.03.2009 19:03:51] "GET xxx.ru/main.htm" "Mozilla/5.0 (Windows; U; Windows NT 6.0; en-US; rv:1.9.0.7) Gecko/2009021910 Firefox/3.0.7"
66.249.71.18 [14.03.2009 21:03:56] "GET xxx.ru/video.htm" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
Gett
На сайте с 18.04.2009
Offline
3
Gett
#5
booch:
Можно логи мониторить. А можно заинклудить файл проверки реферера, и если это реферер одного из ботов, то передавать эту инфу владельцу

может юзер агента

SexCash (http://www.sexcashrus.com/signup.php?ref=Gett)
booch
На сайте с 06.03.2007
Offline
125
booch
#6
Gett:
может юзер агента

Да его, ошибся

G
На сайте с 12.04.2009
Offline
3
gamarjoba
#7

Madness_Lvov благодарю.

Может кто-нибудь еще подскажет какие HTTP_USER_AGENT у ПС-ботов и ПС-тулбаров?

R
На сайте с 30.12.2007
Offline
38
rearranger
#8

Вот такой в паблике лежит.

Юзер-агентов добавил, расскрасил для наглядности.

Иногда использую, может ещё кому сгодится.

zip bot.zip
G
На сайте с 12.04.2009
Offline
3
gamarjoba
#9

За скрипт спасибо, но юзер-агентов тулбаров там не увидел. Кто знает?

Gett
На сайте с 18.04.2009
Offline
3
Gett
#10
gamarjoba:
За скрипт спасибо, но юзер-агентов тулбаров там не увидел. Кто знает?

у тулбара нет юзер агента, он вообще не нужен.

тулбар просто скидывает на сервак гет запросы с урлом текущего сайта

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий