На робота Яндекса не похоже.
Пардон, на индексирующего робота Яндекса не похоже. ;)
А очень похоже на подсветчика, который от индексатора отличается буквой М в User-agent.
Отсутствие даты в заголовках ответа сервера не должно сказываться на индексации.
Дополнительный инструмент для поиска тех, кто страницу упер, а счетчик поленился снять. ;)
AntiFriz, Вы с туристической тематикой точно не работали. :)
Озеро Балатон -- известный курорт в Венгрии.
UEvgeny, почитайте документацию на Russian Apache и его алгоритм определения кодировки.
Погода поменялась. :)
Лучше будет, если 301.
Простейший метод: посмотреть кеш страницы в поисковике и реальную страницу, если есть такая функция в поисковике, кроме этого дату изменения документа следует учитывать.
Если клоакинг делается по IP, то определить его сложно, если по user-agent, то так:
telnet
open 81.19.66.131 80
GET / HTTP/1.1
Host: www.rambler.ru
User-agent: Yandex/1.01.001 (compatible; Win16; I)
Вроде нигде не ошибся.
Прошу прощения, про рефреш я не так понял.
Согласен с Kost, а вот делать формы поиска через GET следует для удобства использования поиска. Может пользователь захочет другу по почте ссылочку отправить, или дать ссылку на результаты поиска, как на этом форуме все делают.
Probe, рефреш в IE следует лечить HTTP заголовками.
Почему?
