Яндекс индексирует все, что запрещено в robots.txt

А зачем для Яндекса отдельный список?

Может где-то пролезли страницы без "index.php" в адресе? Типа /?do=lostpassword.

Сайт покажите, чудес не бывает

вот пациент )

уже часть начинает вываливаться, но юзеры по прежнему в индексе (

Все делается очень просто - топаете сюда загружаете свой роботс и проверяете какие урл он закрывает, а какие - нет.

Если страница уже попала в индекс и потом Вы её закрыли роботсом - она будет удаляться долго (месяцами). Потому пока робот лично не проверит страницу - она будет в индексе. А у робота - своё расписание очередности обхода url и поменять его сейчас нелья. Раньше - была фича управления роботом-индексатором с помощью "подсветки", но спаленная в паблик она перестала работать.

Можете ускорить этот процесс тут.

Заодно увидите, что незакрытые роботсом страницы не удаляются, и посмотрите какими способами реально можно закрыть страницы от индексации Яндексом - он там сверху все пишет.

PS: В вашем роботсе есть нераспознанные Яндексом директивы: ACAP- - поскольку они не обозначены сверху полем User-agent: ИмяРобота, Яндекс к ним лезет тоже.

Сюда потыкайте папки какие надо удалить http://webmaster.yandex.ru/delurl.xml

Вижу дату последнего изменения robots.txt 08 января.

Вы же не думаете, что все должно произойти так быстро?

Яндекс их игнорирует.

Ну так Яндекс и не гарантирует, что страницы не будут не индексироваться: http://help.yandex.ru/webmaster/?id=995318 :)

acap он не понимает, но это и не для него. Это для подтверждения авторства контента.

А последние изменения в роботсе я делал уже после того, как он выложил в паблик закрытые страницы. Перед этим они 2 месяцы были закрыты, но это не помешало яндексу их проиндексировать (

Но уже смотрю начинают выпадать потихоньку. . Это радует.

Спасибо всем за помощь и ответы. ))

Вам, что, трудно пройти по ссылке выше, загрузить роботс и убедиться, что Яндекс лезет в эти директивы?

PS: А что он потом с ними делает - это только одному Яндексу известно.