Скорее всего второе - яндекс успел внести в базу и не успел удалить.
Постараюсь вечером зацитировать ответ суппорта
azso добавил 16.04.2010 в 20:06
ниже привожу ответ специалиста яндекса на мой вопрос:
мой вопрос (дословно):
> Добрый день,
>
> для ограничения индексации использую тэги: <meta NAME="ROBOTS"
> CONTENT="NOINDEX">
> несмотря на это (при проверке страницы на индексируемость через
> "настройку индексирования -> анализ robot.txt -> список URL ->
> указанный адрес страницы") яндекс показывает, что страница к
> индексированию разрешена. Также видно по логам сайта, что яндекс эти страницы индексирует.
> Где ошибка?
ответ (дословно):
"Робот Яндекса поддерживает тег noindex, который позволяет решить эту проблему.
В начале служебного фрагмента поставьте — <noindex>, а в конце — </noindex>, и Яндекс не будет индексировать данный участок текста. Тег noindex не чувствителен к вложенности.
Таким образом с помощью тега noindex Вы не запрещаете к индексации страницу целиком, а ограничиваете информацию для индексирования на конкретной странице.
Чтобы полностью исключить из индекса какие-то страницы или разделы сайта Вам следует воспользоваться инструкциями в нашем разделе: http://help.yandex.ru/webmaster/?id=996567"
открытого источника нет. Я задал вопрос через форму на сайте примерно следующего содержания:
"почему мои страницы с <meta NAME="robots" CONTENT="noindex"> попадают в индексирование. Да и при проверке через сервис "вебмастер -> настройка индексирования ..." ввожу адрес страницы и получаю ответ что она разрешена к индексированию."
мне дали ответ: суть которого в том, что надо пользоваться <noindex> </noindex>.
Поэтом у меня и возник вопрос, который я задал на этом форуме.
Так оно должно работать в таком виде? <meta NAME="robots" CONTENT="noindex">
