Как лучше удалить старые url из индекса

Надо урлы смотреть и придумать robots.txt .

Т.е.? Имеете ввиду запретить в robots.txt старые url? Какой в этом смысл? На них и так 404 выдается.

Хотя может вы и правы. При след обращении к сайту робот прочтет robots.txt и увидев запрет на индексацию старых url - выкинет их из базы, а иначе придется ждать пока он каждую из старых страниц посетит и получит 404.

Тоже вариант. Спасибо.

PS старая версия работала на джумле.

Добрый день всем, похожая проблема.

Сайт был подвергнут XSS атаке и через форму поиска в индекс попало 350 лишних страниц со ссылками на другие ресурсы. Как быть? Если я запрещу весь этот раздел в robots.txt то они исчезнут из кеша ли нет? И как мне их удалить, чтобы они нпоисковиком больше не учитывались?

Буду признательна за совет.

Тоже нужно удалить страниц 300, через какое время они сами удалятся?

Можно ещё 301 редирект со старых страниц поставить.

хм, жеско🚬

Почему же? Нормальный способ)))

Так я не могу редирект с этих страниц поставить - это результаты поиска страницы типа search/?query=... и куча страшных знаков . Они в нормальном виде на сайте не существуют - генерятся только при вводе слова в поиск.

и встречный вопрос к участникам: запретил поддомен в роботс, но данную дериктиву воспринял только яндекс, а у гугля как закрыть?

пару недель наблюдаю запрещенный поддомен в индиксе..

Ну закрой тотда в роботсе по маске search