Грешу иногда тоже _этим.
Незнаю какой мотив у других, у меня привычка уже просто от частого посещения варезных форумов, там обычно непринято ставить прямые ссылки.
SergoZD, вот правильное решение
Суть ухватил, просто я такого не встречал ни в одной кмс, в той которую я использую, отдается например параметр last-modified - уже легче, сейчас буду пробовать шаманить.
nickspring, опа пасиба вот она мысль :)
Я как то и не подумал, что можно проверить через клиента.
Почти такой же вопрос возник в теме рядом.
По логике смысл 304 отклика чтобы дать понять роботу, что страница не изменялась и нечего ее запрашивать, соответсвенно робот от нее отвалит просто.
Тут надо найти способ узнавать индексировалась ли страница уже.
И если да, то отдавать такой заголовок. Но как это сделать пока мыслей нет.
SergoZD, спасибо за инфу, насчет 304 отклика это интересно надо будет поэкспериментировать.
Ситуация с увеличением допустимой частоты до максимума, мне всеравно не помогла, то что это Яндекс - это точно, IP ихний.
Вчера ночью заметил снова яндекс в бане был, пришлось пока отключить antihammering. Заметил одну особенность в бан он попадает, в основном ночью, когда каналы свободны и скорость увеличивается.
Пока от этого вреда нету никакого, да и врядли будет, но то что сканирующие роботы создают нагрузку - это факт, степень нагрузки - это другой вопос. Тут уже чисто спортивный интерес проснулся, если можно оптимизировать эти факторы, то почему бы и нет.
Вот начал сейчас дописывать фильтр специально под Яндекс, чтобы его не банило пока, попробую с 304 откликом пошаманить.
Есть идея, облегчить ему задачу и отдавать часть страниц которые я точно знаю изменяться не будут(например новости) с этим откликом, но как узнать запрашивал робот данную страницу или нет, пока загадка.
Интересно бы мнение старожилов услышать на счет этой темы.
Не в обиду топикстартеру, заманчиво, но нехочется влипнуть по неопытности.
Да мета прилично дает, вот моя статистика за апрель месяц ( вообще первый месяц работы сайта)
Яндекс 176
Meta-Украина 127
Google 43
Rambler 29
Search.Mail.ru 16
MSN 14
bigmir)net 3
ну а остальные там 1 по заходу всего, повторюсь сайт работает с 27 марта, это статистика за первый полный месяц - за апрель.
Сайт ориентирован в основном на пользователей из Украины.
Могу дать линк если не верите :)
Коля Дубр, я тоже так считаю, раз спецификацией не запрещено, значит можно. Если это не спам ключевиками в заголовках, а ссылки используются оправданно, то почему бы и нет.
Я может не так немного выразился.
Под динамическими я имел ввиду, метатеги изменяющиесь в зависиомсти от страницы, тоесть для каждой страницы должны быть поля для задания title, description, keywords.
Или на худой конец хотябы брался заголовок страницы и добавлялся к общему title.
