Почему гугл держит страницы в индексе которые отдают 404 или запрещены в robots.txt

ох ну народ ей богу, уже 300 раз обсуждали как от этого избавится.

1 раз бот попал на страницу - теперь будет на нее ходить, вопреки правилам в роботах. В ВМТ надо удалить все 404 страницы и все страницы которые запрещены к индексации.

А вапще - сделал сайт, проверь что все левое закрыто от индекса, потом открывай для индекса.

удалены в конце августа через в вмт,типа успешно. 2 месяца висели в omitted results

клиентское SEO - это прежде всего разгребание чужих ошибок,а потом уже совершение своих собственных😂

Не понял "вторую копию" чего? Сайта?

Я когда читал что "закрытые в файле роботс страницы могут снова попадать в индекс например из за ссылок на эту страницы с других страниц" сначала режут потом отмеряют сколько надо было :) Кстати уже писал как правильно закрывать от индексцаии выше.

Во всех url типо такого http://iphonchik.com.ua/obzor.html?limit=100 стоит "<meta name="googlebot" content="noindex">" robots я открыл. Надеюсь на адекватность гугла и весь этот мусор повылетает.

Почему я надеюсь?) Да потому что это не яндекс 😂

onikys, ну и жди у моря погоды. Яша в этом плане умнее (а может тупее?) сказали не ходить - не ходит. А гуглу один раз показал страницу, пока не удалишь ее из всех мест будет ходить.

Ну есть еще жестокий вариант через хтаксесс закрыть все железно.

Помимо <meta name="googlebot" content="noindex"> добавил еще ответ 404. Этого должно хватить.