Команда Яндекс.Вебмастера существенно доработала функциональность «Удалить URL», добавив в инструмент возможность удалять страницы сайта по префиксу при условии, что этот запрет реализован и в robots.txt.
Теперь, если ввести в поле адрес сайта:
http://example.com/
то это будет означать, что весь сайт нужно удалить из поиска.
А если ввести только раздел, например, вот так:
http://example.com/catalogue/
то из поиска нужно удалить все страницы этого раздела.
Если же необходимо удалить страницы с параметрами в URL, например, после символа «?», то для того, чтобы они пропали из поиска, нужно указать:
http://example.com/?page
При этом в обязательном порядке нужно продублировать запрет в robots.txt, иначе команда не сработает. Указывать можно как абсолютные, так и относительные пути, как и в robots.txt.
Через несколько часов после использования инструмента указанные страницы должны будут пропасть из поиска. Чтобы вернуть раздел обратно в поиск, его нужно снова разрешить к индексированию в robots.txt, и отправить на переобход.
Напомним, в конце июня Яндекс.Вебмастер существенно расширил функциональность мониторинга изменений важных страниц: были улучшены текущие предупреждения, добавлены новые, а также обновлен интерфейс.