Разумеется, цикл эксперимерта нужно повторить раз 10 и посчитать среднюю величину периода переиндексации в днях и среднеквадратичное отклонение. Тогда задача будет решена полностью.
Антон Белов, а у вас самая стабильная единица измерения - промежуток между апдейтами?
Кстати, процитирую готовые результаты измерений: "Ваши саповские ссылки в среднем 50 дней стоят до индексации :)"
И 50 дней - это далеко не 2 или 3 апдейта ;)
Придумайте запрос, по которому в выдаче будет нужная страница и нажмите "сохраненная копия".
Запишите дату индексации.
Повторяйте эксперимент каждый день. Когда дата индексации обновится, посчитайте разницу с предыдущей датой. Это и будет период переиндексации данной страницы.
Конечно, снаружи этого не видно.
Сервис глючит потому что на предыдущей строке не закрыты кавычки в конце Description.
И в какую сумму вы оцениваете услуги такого специалиста + слив его клиентов?
А вы задайтесь.
http://www.google.com/webmasters/
Это недальновидно и опрометчиво. Зачем делать фигово, сразу делайте как следует, фигово и само получится.
Если убрать пустые строки между User-agent и Disallow, то работает.
Перед Host тоже не должно быть пустых строк.
А пока никакие запреты не работают, файл сделан не по стандарту. Пустая строка - это разделитель между блоками.
Про это надо договариваться заранее. Или у вас клиенты хотят - платят, а не хотят - не плятят?
А что такое частота индексации сайта? Если бы страницы, я бы мог догадаться. Но сайта?
Вы не пробовали заглядывать в логи своего сайта? Вы даже не представляете, сколько вы потеряли.