Почему гугл индексирует страницы, запрещенные в robots.txt?

также проблема. Незнаю че он тупит.

Знающие есть как справиться с этим?

Он через недельку одумаеться и спрячет их.

Или вы просто не совсем правильно прописали запрещающее действие в роботсе. Погуглите, сравните с правильными вариантами....

у меня запросы в топ попали, только после того как я весь сайт в гугле запретил к индексации.

причем в серпе только урл висел.

запрет снял - позиции пропали.

Вот оно, оказывается, как... ) Действительно. А то "оптимизиция", "индексация"... понимаешь...

По теме.

могут стоять ссылки на сайт.

Выкидывается с помощью WMT

or 301

😆

Вы имеете в виду через удаление URL вручную?

Такой фигнёй не только Гугл грешит. Яху, например, пару месяцев не обращал внимания на запреты в роботсах, да и Яндекс порой не особо торопится выбивать из индекса запрещёнку.

А как тогда лучше поступить? Вручную удалять или подождать когда он сам выкинет их?