Форум Сайтостроение Веб-строительство

Записи в логах - какие именно?

[Удален]
903

Здравствуйте. До сих пор не понял, объясните, пожалуйста, коротенько, какие соединения отражаются в логах - ВСЕ соединения, то есть:

-если КТО-ТО придет ко мне с серпа поисковой системы, то это отразится в виде

"217.20.82.147" "01/Oct/2005:20:14:00 MSD" "GET URL HTTP/1.1" "200" "24247" "http://www.rambler.ru/srch?words=%E4% [...] %21" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; .NET CLR 1.1.4322)"

;

-если РОБОТ придет кешировать, то это будет выглядеть как

"01/Oct/2005:03:53:11 MSD" "GET URL/robots.txt HTTP/1.1" "302" "308" "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

;

-если придут ПО ССЫЛКЕ, то это будет отмечено;

-а вот если Я ЛИЧНО, или КТО-ТО еще, -вот это мне и неясно- набью свой урл В СТРОКЕ АДРЕСА, это будет зафиксировано или нет?

Просто видел в логах такие вещи, о которых роботам знать совсем необязательно (но которые я набирал в адресной строчке).

ЗЫ конкретно - "Агава".

A
На сайте с 02.06.2004
Offline
36
Artich
#1

Радиатор, в логах сохраняются все запросы к серверу, вне зависимости от того, кто приходил (бот, юзер) и откуда (по ссылке, набор урла и т.д.)

K
На сайте с 31.01.2001
Offline
737
Kost
#2
видел в логах такие вещи, о которых роботам знать совсем необязательно (но которые я набирал в адресной строчке).

А интересно, как об этом узнают роботы? У них есть доступ к лог-файлам по протоколу HTTP? Зачем же им давать такой доступ?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
[Удален]
#3

Спасибо большое, я понял теперь.

Просто раньше мне казалось, что ЛЮДИ приходят ПО ССЫЛКАМ, и отмечается только это.

Kost, я имел в виду другое - я боялся, что роботы (каким-то чудом, вот наивный) САМИ находят некоторые страницы (например, неправильно понимая то, что написано в robots.txt) - именно это меня напугало.

Поисковые запросы в одном Перелинковка Маркировка рекламы с 1
K
На сайте с 31.01.2001
Offline
737
Kost
#4

Кстати, если на вашем сайте есть счетчик Рамблера, то его бот может узнать, какие адреса вы набирали вручную, а потом проиндексировать эту страницу.

[Удален]
#5

Да Бог с ним, он и сам найдет странички. Пока еще НИКТО, кроме меня, ничего руками не набивает...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий