Надоело. Гугл

Как закрывали? Можно поточнее?

как обычно по старинке, в роботсе

User-agent: *

Disallow: /cart/

Disallow: /search/

Disallow: /feedbacks/

Disallow: /add/

Disallow: /added/

Disallow: /to_know_the_size_of_shoe/

Disallow: /questionnaire/

Disallow: /register/

Disallow: /js/

Disallow: /print/

Disallow: /news/

Disallow: /*.php

Disallow: /*.css

Disallow: /*.js

При всем этом мне гугл в поиск выгоняет разделы news, print.🙅

Может взял перед тем, как Вы закрыли?

Если так, то выкинет, со временем.

Бывает и такое, со временем все образумится.

добавьте еще метатег noindex

так ведь это придется прописывать для каждой страницы, которую гуглбот не должен сканировать?

<meta name="googlebot" content="noindex">

вот цитата гугла:

(Кроме того, если вы заблокировали эту страницу с помощью файла robots.txt, мы также не сможем увидеть этот тег.)

Имхо бред указывать в каждой странице этот метатег, роботс этому выход, но почему Гугл блин добавляет запрещенное в поиск я не знаю....всегда сайты сначала оптимизирую, все закрываю, а потом пихаю в поиск!

потерто...

Ну в шаблонах нужных только.

Кстати, такая же петрушка. Не учитывает он robots.

сайты самописные, придется писать код, но не очень хочется это делать