Как быстро поисковики анализируют robots.txt

в среднем через 2 недели после захода робота

То есть после того, как поисковик снова загрузит robots, страницы сразу из индекса выпадут?

по логике вещей да. т.к. роботс первая вещь куда они смотрят

Через 1-2 апа, а из гугла могут и не выпасть. А будет

webim, Вы выдумали и посоветовали ТС. Страницы из индекса не выпадут сразу как только ПС снова загрузит robots.

собственно можно было просто сказать, если ошибся. Т.к я написал, что это по логике вещей так должно быть (бот загрузил, посмотрел и выкинул с индекса, т.к. выкидывать они любят).

у вас и статья на этот счет смотрю имеется

У меня другая логика: индексирует бот какие то страницы сайта с учетом роботса, запрещены они там - не станет в индекс добавлять (или удалит потом из индекса). Но если эти страницы он и не собирался индексировать, то и плевать ему на запись в роботсе. Многие страницы вообще висят месяцами.

Есть вебмастер, загляните туда. Там есть сервис при помощи которого можно проанализировать свой роботс. Если сайт живой и страницы быстро добавляются в индекс, то сразу ваши изменения будут отражаться на роботсе

В Гугле такие старницы не уйдут из индекса, пока вы не удалите такие страницы через ВМТ, или пока вы не откроете их в роботсе снова, а на самих старницах пропишите <meta name="robots" content="noindex" />.

Роботс.тхт запрещает не индексацию ,а сканирование.