Пропадание из кэша

Как мне кажется, если страницы не обновлялись больше какого-то времени он перестает приходить.

И выкидывает все, что проиндексировал? :)

К тому же главная страница представляет собой статичный html, отдающий все положенные коды и обновляющийся раз 10-15 в сутки.

Можно попробовать обновить страницы, достаточно чтобы просто поменялась дата.

Ты читаешь, что я пишу? Главная страница обновляется 10-15 раз в сутки - при этом она каждый раз создается зановои отдает корректное Last-Modified.

У меня выкидывал.

То есть еверфлуксу все время 200 отдается?

Тогда не знаю.

У меня отдавлся 304 (Not Modified), после чего данные еверфлукса из базы пропадали.

К тому же это никак не объясняет, почему из кэша вдруг вывалился уже имевшийся там образ страницы.

К тому же приходить он не перестал - только за 1-е число он три раза взял главную страницу, не считая еще несколько десятков страниц.

Не совсем - один раз он запросил директорию без слэша (/blog), получил 301. Через пару часов запросил со слэшем, получил 200.

Причем это не менялось никак - четыре месяца так работает...

имхо это связано с сылками на этот сайт, а не с самим сайтом

я не ставлю Last Modified и необновляю страницу

тем неменее фрешбот ходит достаточно регулярно

defresto, а причем тут ссылки? Ссылки есть, за последнюю неделю их только больше стало...

Так, вы опять не поняли. По порядку:

1. Страницы обновляются 10-15 раз в день.

2. Фрешбот приходит до нескольких десятков раз за день, в том числе за главной страницей - 3-4 раза в день.

3. Сегодня в кэше вместо более или менее актуального образа главной страницы, обычно отстающего на сутки-двое от самой страницы, появилась копия, взятая при февральском обходе обычным роботом.

Вопрос - что бы это значило?

Не знаю, как у кого, но у нас на самом обновляемом сайте - всегда cache 3х дневной давности ;), но сейчас - посмотрю как будет меняться - даже интересно.