Задолбался удалять из индекса гугла закрытые в robots страницы

Google Webmaster Tools - показвает, что всё закрыто, но по факту выкидывает закрытые страницы в поиск, но нужно отдать должное, сразу начинает чистку, -100-200 страниц в день.

т.е. присутствовал кеш страницы запрещенной к индексации в роботсе?

terrell, вот свежие рекоммендации самого Google. Обратите внимание на

Если не подействует - остаётся крайняя мера: напишите на этих страницах свои личные данные и отправляйте телегу в Гугл.

обязательно в полном объеме (в том числе логины/пароли ко всем аккаунтам) и с сканом паспорта

Сейчас, пока, этой проблемы нет, посмотреть не могу, но на сколько помню кэша не было.

StaroverovMax добавил 03-08-2011 в 15:27

Дык, ведь гугл признает, что может проиндексировать страницы при наличии ссылки на ресурс, так и отправят на перечитку своих рекомендаций, в лучшем случае.

или я чего-то не понимаю, или вы что-то путаете...

как закрытые архивы можно было открыть через гугл? вы сообщали логин/пароль роботу гугла?

На форуме не раз обсуждали хождение гуглабота в админских частях.

Что по поводу корейцев, которые нагрянули и распотрошили серваки гугля в Корее, ломившиеся от логинов и паролей)))?

В моём случае пароль это динамический код, который передавался через смс.

StaroverovMax, ладно, не буду спорить... но скорей всего проблема была не в роботе...

Зачем спорить, я понял о чем говорите вы, вы поняли меня.

Настроить роботс не представляет труда, но заставить гугл работать по вашим правилам, не так уж легко.

Я грешил на бар, но это безосновательно..

ИМХО Гугл делает себе фронт работы, прямо как в Простоквашино: "Чтобы что-то продать, нужно сначала, что-то ненужно купить", тут смысл тот же :D