робот-"простукивалка"

123 4
nickspring
На сайте с 29.03.2006
Offline
228
#11

ничего не выбросьте. ALL правильно писал:

ALL:
В логах посмотреть, что выдал сервер такому гостю:

User-Agent: Yandex/2.01.000 (compatible; Win16; Dyatel; C)

и посмотреть, что этот гость запрашивал.

возможно эта инфа будет полезна.

Это первое, что надо сделать.

VladiZlav
На сайте с 06.04.2006
Offline
214
#12

Мой Вам совет - зайдите сюда http://www.dinews.ru/seo/ введите там адрес сайта и проанализируйте... Там есть графа "заголовки" - раскройте ее... Если увидите HTTP/1.1 200 OK То собственно все у Вас ОК 🚬

zagul
На сайте с 27.03.2006
Offline
131
#13
VladiZlav:
Мой Вам совет - зайдите сюда http://www.dinews.ru/seo/ введите там адрес сайта и проанализируйте... Там есть графа "заголовки" - раскройте ее... Если увидите HTTP/1.1 200 OK То собственно все у Вас ОК 🚬

Непонимаю

HTTP/1.1 200 OK

Date: Tue, 16 May 2006 10:17:37 GMT

Server: Apache/1.3.34 (Unix) mod_auth_passthrough/1.8 mod_log_bytes/1.2 mod_bwlimited/1.4 PHP/4.4.1 FrontPage/5.0.2.2635 mod_ssl/2.8.25 OpenSSL/0.9.7a

X-Powered-By: PHP/4.4.1

Set-Cookie: PHPSESSID=526046ef2bc6e16671c390e57fe5fe55; path=/

Expires: Thu, 19 Nov 1981 08:52:00 GMT

Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0

Pragma: no-cache

Connection: close

Transfer-Encoding: chunked

Content-Type: text/html

Тут есть. Даже показывает что сайт в каталоге... а в каталоге его нет... сщас вспотею😡

zagul
На сайте с 27.03.2006
Offline
131
#14
nickspring:
ничего не выбросьте. ALL правильно писал:



Это первое, что надо сделать.

неуспел там лог на 300 последних - другого к сожалению ненашел.

zagul
На сайте с 27.03.2006
Offline
131
#15
Vin:
Вообщем так выбросте все советы, что выше.
Найдите прогу, которая может показать Вам HTTP заголовки.
Самая стандартная telnet.
Но есть еще много всяких, которыми любят пользоватся программисты.
У меня например стоит плагин к IE называется он HttpWatch.
Когда сервер отдает любой документ юзерагенту, будь-то бот или бразузер с человеком, сервер сначала отдает HTTP заголовки, а потом уже html.
Что бы все было нормально, надо что бы эти заголовки начинались так: HTTP/1.1 200 OK

тут их полно какой получше ? скачал первый - не то...

zagul
На сайте с 27.03.2006
Offline
131
#16

там же в каталоге Я есть поддомен я спросил у Я...

вот ответ:

Уважаемый Алексей!

К сожалению, в настоящее время от сайта www.домен.com продолжает приходить

отклик, отличный от 200. В то же время от сайта story.домен.com приходит

нормальный отклик, и он продолжает публиковаться в каталоге. В данной

ситуации решение проблемы может исходить только от хостинг-провайдера.

в тоже время по ссылке что давали выше отклик нормальный. ой-ой

Rimlyanin
На сайте с 22.02.2006
Offline
200
#17

Судя по тому что стоит 300 последних, то очень похоже на cpanel

Там есть Raw Log Manadger, включить там сохранение логов апача и тогда можно будет посмотреть что выдается дятлу...

zagul
На сайте с 27.03.2006
Offline
131
#18
Rimlyanin:
Судя по тому что стоит 300 последних, то очень похоже на cpanel
Там есть Raw Log Manadger, включить там сохранение логов апача и тогда можно будет посмотреть что выдается дятлу...

Да есть. Включил. (Archive Logs in your home directory at the end of each stats run [every 1 day(s)]) оно?

Revan
На сайте с 09.09.2005
Offline
321
#19

По идее вы можете юзер агента выставить по желанию, это редактируемое поле..

С уважением, Прокофьев Александр, founder KudaGo.com (http://kudago.com). Отдаем информацию обо всех мероприятиях в РФ + Киев по API (/ru/forum/912869) всем желающим.
Rimlyanin
На сайте с 22.02.2006
Offline
200
#20
zagul:
Да есть. Включил. (Archive Logs in your home directory at the end of each stats run [every 1 day(s)]) оно?

Оно, вторая галка означает что за прошлый месяц логи будут удалятся, я её никогда не ставлю.

Теперь подождите сутки и увидите на хостинге в корневой директории папку logs , вот там они родимые и будут лежать, в зависимости от настороек хостинга они будут пополнятся, на моем хостинге это происходит раз в сутки....

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий