LiM

Рейтинг
71
Регистрация
30.11.2001

aestuff,

Такие редиректы вполне штатная ситуация и к бану не приводят.

В соседнем топике идет очень похожее обсуждение. Там разговор продвинулся уже далеко и есть ответы на многие вопросы про редиректы и поисковики:

Kostya,

Этот редирект идет через заголовок ответа сервера. Вполне штатная ситуация.

Все очень просто. Related Links Алекса вычисляет, набирая статистику, куда посетители (имеющие этот тулбар) обычно заходили близко по времени с посещением Вашего сайта.

Когда пользователь ищет какую-то информацию, он обычно ходит по нескольким сайтам с близкой тематикой. Набирая статистику таких блужданий можно без особого труда вычислить вот такие Related Links

Робот видит редиректы через меты и через команду в заголовке ответа сервера.

Редиректы через Ява-скрипт (и подобные) робот не видит.

Я ведь могу за это дело бан схлопотать?

нет, бана не будет.

1) страницы уже не существует - при переиндексации робот ее выкинет из базы;

2) пользователи получают информацию по запрошенной теме.

Правда, если страница сделана так, что индексирующий робот не видит редиректа, то бан возможен.

P.S. Очень жаль, что LiveHTTPHeaders не совместим с FF 1.0

У меня нормально работает... 8-/

1) да, влияет. Попробовали бы сами - это намного рациональнее, чем ждать ответа;

2) давно это было? в Яндексе недавно был сильный сбой - они его долго "залечивали"... там многое происходило в это время...

freefall,

О... отлично, что старый привели.

В нем строку

ErrorDocument 404 http://www.domen.com/404.html

достаточно заменить на

ErrorDocument 404 /404.html

и все будет нормально работать.

webalizer нормально отрабатывает такие логи - это штатная ситуация и в отчете по несуществующим страницам (если правильно помню, такой есть в webalizer'е) будут показываться их адреса.

Про счетчик не скажу - сами изучайте.

А страницы, откуда стоят ошибочные ссылки можно вытаскивать из этих же логов либо другими анализаторами (webalizer такого не дает; analog, кажется, дает), либо банальной фильтрацией лога по строке " 404 " (с пробелами вокруг числа) - я именно так и делаю.

Адрес страницы со ссылкой в строке логов идет после кода ответа и длины страницы (...404 11941 "-"... <- вместо прочерка из Вашего примера).

Так...

Сейчас в настройках сервера стоит переброс клиента на файл /404.html, если нет запрошенного.

Сайт mirohost.net стоит на сервере под Апачем. Даже если Ваш сайт стоит на другом сервере, скорее всего там тоже Апач.

Попробуйте в корень сайта положить файл с именем ".htaccess" (c точкой в начале!) и вот таким содержимым:

ErrorDocument 404 /404.html

Если файл .htaccess уже есть, временно его замените на новый.

Далее попробуйте зайти на несуществующую страницу и посмотреть, что у Вас ложится в логи.

У вас должен получить не переброс на новый адрес, а замещение несуществующей страницы содержимым файла /404.html. В логах должно получиться что-то типа такого:

smocke.swip.net - - [02/Dec/2004:01:35:46 +0200] "GET /ru/pt/swep.htm/ HTTP/1.1" 404 11981 "-" "Nokia7210/1.0 (5.52) Profile/MIDP-1.0 Configuration/CLDC-1.0"

Skam, судя по всему "сквозная ссылка" - синоним выражения "прямая ссылка", т.е. ссылка, по которой передаются PR, тИЦ, ВИЦ...

Всего: 1000