- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Lisa, в Вашем случае надо было выдавать заголовки, управляющие кешированием, а не Last-Modified, а еще лучше правильно выдавать и то, и другое.
Никогда не понимал, зачем это делают. Если лежит статика, то Apache автоматом выдает дату последнего изменения документа, а для SSI эту дату Апач перестает выдавать, потому что результирующий документ уже является динамическим.
SYNPHARA, если у Вас чистый HTML, то "выключив" обработку SSI для файлов html и html Вы решите свою проблему.
Дима, Апач, настроенный по умолчанию, не выдает никакой даты для динамических документов.
Насчет IIS не знаю, я с ним не работал.
Даже если и выдавать для документа текущую дату, то робот чаще заходить не будет, здесь ты абсолютно прав.
Но у Яндекса есть два(!) лимита документов:
1. Лимит в 500 страниц, которые он "унесет" с сайта за зодин заход (с кодом 200 Ок)
2. Лимит "запрашиваемых" документов, который в несколько раз больше, точную цифру не знаю.
Т.е. если на сайте большое количество документов (тысячи), то обработка Last-modified-since вместе с выдачей Last-Modified, позволит роботу забирать больше измененных документов и не трогать те, которые не менялись.
Сергей, мистер mnt приводил функцию на PHP, которая обрабатывает If-Modified-Since здесь, я использую похожую.
Четыре с половиной тыщи запросов своими глазами в логах видел. И возможно, это не предел.
Я как-то верхним пределом не интересовался. Убедился, что робот ест то, что надо и забыл об этом. :)
Кстати, господа!
В свете изменений выдачи на Яндексе (страницы со всех поддоменов под "одним зонтом"), не поделится ли кто-нибудь информацией, лимит в 500 документов касается каждого поддомена отдельно или теперь Яндекс берет только 500 документов со всех поддоменов?
Есть использование ssi, сервер включен на поиск ssi в html.
Никогда не понимал, зачем это делают.
Так много аккуратнее.
Даже если на конце стоит не htm, а php или shtml.
Почему-то другие расширения файлов мне глубоко антипатичны.
(пример: стояли MSIE и NC, saved-file-on-hdd-html у меня ассоциировался с MSIE, а saved-file-on-hdd-shtml с NC. Мелочь, но всеж, меня доводило)
Сайт немного динамический ;-).
SSI для того и включался.
Насколько я понимаю, если разберусь с PHP и сделаю динамику на нем, лучше не будет (опять же апач будет думать что это динамика), да и возиться не хочется.
А нельзя ли это сделать htaccess-м, чтобы он last-modified выдавал по заголовку файла html, в котором вызвается инструкция ssi?
В противном случае придется либо раз в месяц выставлять стандартный last-modified на все файлы, либо лезть в яндекс за этим... как-его... XBitHack full, чтобы понять, хотя бы что это такое.
Но у Яндекса есть два(!) лимита документов:
1. Лимит в 500 страниц, которые он "унесет" с сайта за зодин заход (с кодом 200 Ок)
Хм... у меня никак не 500, и общий их вес - мег. Но может он все-таки не индесит, потому как ему лень переться на сайт, на котором, судя по last-modified, уже полгода ничего не меняли .
Мне, например, легче на PHP объяснить Апачу, что он должен думать. :)
Некоторым легче на Perl, если Вам легче работать с SSI, то придется разбираться с XBitHack full.
Вес документов здесь ни при чем. Возможно я туманно изъясняюсь, но отдельно стоящий last-modified Яндексу по барабану. Если он на запрос к серверу получает 200 Ок, то документ заберет, а дальше уже сам там решает, лень ему переться к Вам на сайт или нет. Может у Вас документы полгода действительно не менялись, вот он их и перестал забирать.