Как спрятать страницу от поисковиков.

Этого предостережения по-моему достаточно один раз, пользователь просто не выдержит постоянного мелькания предупреждения и нажмёт крестик окна раньше, чем пройдёт пару страниц.

1. Создать файл robots.txt.

2. В нём прописать:

User-agent: *

Disallow: /page.htm

3. Поместить файл robots.txt в корень сайта.

---

Также ссылка по теме:

- Как правильно составить robots.txt

спасибо за ответ. но видимо ты не правельно понял немного.

естественно страница конфирма не будет светиться каждый раз при переходе на новую страницу сайта.

один раз при попадании на любую страницу - будет писаться в сессию результат ответа или еще как нибудь сделаю.

Просто как я понимаю - будет следующая ситуация:

бот заходит на страницу, например http://mysite.com

его редиректит на страницу, например: http://mysite.com/confirm.php

ну и усе... а там только 2 кнопки, чтобы перейти на сайт или покинуть его. бот то на кнопки не нажимает. и получается ни на морду ни на какую другую страницу - поисковый робот не попадет.

Думаю, что при желании (или стуке конкурентов) это 100% будет расценено как клоакинг.

Для вашей задачи великолепно подойдет JavaScript - при загрузке страницы проверяем куки, и если не нашли что надо рисуем на весь экран div (например), на котором нужная инфа и пока не нажмешь "Согласен" div просто закрывает всю полезную площадь...

Для поисковой системы содержимое каждой страницы будет = ее контенту, а див так и будет visibility:hidden, поскольку JavaScript пока ПС не выполняют.

Для пользователя - все ок. Да, остается вопрос что делать с пользователями с отключенным JavaScript? Но все решаемо, и их не более 5%.

Думаю, где-то так надо :)

sokol_jack, я думаю это страница "Вам уже есть 18 лет? Да/Нет"

И зачем ПС ее индексировать?

совершенно верно.

я думал решение совершенно тривиальное в плане реализации, просто что то не могу догнать как сделать.

просто сайт уже поисковиками проиндексин и достаточно неплохо.

не хочется перегадить то, что уже сделано.