sgrumi, я всё же хочу обратить Ваше внимание, что записи в файлах сайтмап занимают гораздо меньше места, чем кэш. И нинафиг не нужно держать на диске кэш миллиарда страниц, если 999 миллионов из них просматриваются раз в год.
Гуголь в помощь. Не вижу смысла пересказывать своими словами.
А куда посылать собрались?
Красный треугольничек сами себе нажмите и там попросите.
Мечта поэта. Уж не знаю, насколько это постоянно, но как раз то, что хочет ТС, судя по всему.
Робот же всё равно будет читать сайтмап. Там и настроить время.
Ну так и настройте эти сайтмапы так, чтобы роботы не шастали по одним и тем же страницам каждый день.
Так в некоторых CMS называется строка, которая пойдёт в url :)
Опять не в тот раздел вляпались? Это не вопрос по оптимизации.
Ну да, конечно. Я и говорю: пришёл полаяться, а не читать и слушать.