Блокирую индексацию в роботс а гугл все равно индексирует - что делать?

123 4
kapper
На сайте с 25.11.2010
Offline
174
2344

Замучился уже блокировать страницы и удалять через вебмастер их после блокировки в роботс.

Гугл вновь их индексирует хотя в роботс они запрещены - при проверке в вебмастере гугла этих страниц тоже пишется что запрещено. Почему он их тогда индексирует и каким образом еще можно удалить страницы из гугла кроме роботс?

skoch
На сайте с 04.08.2008
Offline
152
#1

Гугл тормоз, нужно ждать. За 2-4 месяца выкинет, такое часто бывает

WordPress Changelog (https://wordpress.org/plugins/wp-changelog/) - Или когда с вашим сайтом что-то пошло не так
WooCommerce Product Request (https://wordpress.org/plugins/woo-product-request/) - Покупка в один клик
[Удален]
#2

kapper, если на эти страницы есть ссылки, то не выкинет

kapper
На сайте с 25.11.2010
Offline
174
#3
burunduk:
kapper, если на эти страницы есть ссылки, то не выкинет

Нету - сайт молодой, создаю только. Спасибо...

MC
На сайте с 09.04.2012
Offline
125
#4
burunduk:
kapper, если на эти страницы есть ссылки, то не выкинет

а если meta указание для роботов "noindex nofollow" - выкинет?

A
На сайте с 12.06.2013
Offline
1
#5

По userAgen'у заблокируйте, точно сработает.

[Удален]
#6

MisterCh, это рекомендация и робот не обязан ей следовать :)

kapper
На сайте с 25.11.2010
Offline
174
#7
Arnowt:
По userAgen'у заблокируйте, точно сработает.

А что это такое и с чем его едят?

S3
На сайте с 18.04.2011
Offline
109
#8
При наличии на странице метатега noindex Google полностью исключает эту страницу из результатов поиска, даже если на нее ссылаются другие страницы.

- https://support.google.com/webmasters/answer/93710?hl=ru

единственное но - на страницу с метатегом не должно быть запрета в роботсе, чтобы бот мог ее просканировать

[Удален]
#9

sok3535, только вот ни слова, про не учёт данной страницы в доменных факторах

как отреагирует гоша если таких страниц будет очень много?

и на них будут вести порно анкоры? :)

B
На сайте с 07.02.2005
Offline
161
#10
burunduk:
как отреагирует гоша если таких страниц будет очень много?

Ответ sok3535 совершенно правильный. Имел опыт с 11000 страниц мусора на сайте (при всего 12500 в индексе). Гораздо хуже их иметь в индексе, чем иметь вне индекса прописанным noindex.

Что же до порноанкоров, это совсем другой вопрос.

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий