Гугл красавчик, индексирует запрет

12 3
slaviktorres
На сайте с 05.12.2010
Offline
183
2062

Как так, в файле роботс стоит запрет на индексацию страниц сайт.ру/user/...., но гугл красавчик же, проиндексировал страницы, в поиске выдает ссылки на страницы юзеров и пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.", как так???

sentines
На сайте с 30.10.2013
Offline
25
#1

Все норм, он ушлый чувак, сначала все подряд индексирует, а потом уже правила применяет.

Продвижение сайтов в Перми (http://a2-pr.ru/prodvizhenie-saitov/) Интернет-магазин строительных материалов в Перми (http://baza59.ru)
slaviktorres
На сайте с 05.12.2010
Offline
183
#2
sentines:
Все норм, он ушлый чувак, сначала все подряд индексирует, а потом уже правила применяет.

То есть он потом их исключит из поиска и кабинета вебмастера?

LEOnidUKG
На сайте с 25.11.2006
Offline
1726
#3
slaviktorres:
То есть он потом их исключит из поиска и кабинета вебмастера?

Нет, не исключает. В этом весь и прикол :)

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/
slaviktorres
На сайте с 05.12.2010
Offline
183
#4
LEOnidUKG:
Нет, не исключает. В этом весь и прикол :)

Гугл бродяга, сам пишет что нельзя индексировать, но сам индексирует и показывает в поиске, красавчик. 🙅

trahtor
На сайте с 06.12.2005
Offline
405
#5
slaviktorres:
Как так, в файле роботс стоит запрет на индексацию страниц сайт.ру/user/...., но гугл красавчик же, проиндексировал страницы, в поиске выдает ссылки на страницы юзеров и пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.", как так???

Да это нормальная ситуация. Гугл такой 🤣

LEOnidUKG
На сайте с 25.11.2006
Offline
1726
#6
slaviktorres:
Гугл бродяга, сам пишет что нельзя индексировать, но сам индексирует и показывает в поиске, красавчик. 🙅

Вы ещё верите в то, что ПС пишут? 🍿

Забейте на это дело.

Roousk
На сайте с 07.10.2012
Offline
58
#7

Леонид дело пишет, просто нужно забить, что плохого вам от того что индексирует, другое дело если он закрытые страницы ставит выше в поиске открытых, вот тут стоит задуматься. Да и вообще, дай Бог каждому, чтоб для него это была самая большая проблема на просторах инета:)

З.Ы. не отвлекайтесь на мелочи

slaviktorres
На сайте с 05.12.2010
Offline
183
#8
Roousk:
Леонид дело пишет, просто нужно забить, что плохого вам от того что индексирует, другое дело если он закрытые страницы ставит выше в поиске открытых, вот тут стоит задуматься. Да и вообще, дай Бог каждому, чтоб для него это была самая большая проблема на просторах инета:)

З.Ы. не отвлекайтесь на мелочи

Просто я возмущен его наглостью. 😡

Roousk
На сайте с 07.10.2012
Offline
58
#9
slaviktorres:
Просто я возмущен его наглостью. 😡

Ну а что, его право, где хочет, там и ходит...ну и тем более как хочет, так и ходит..

Maxim_Minin
На сайте с 13.07.2008
Offline
78
#10

у меня google ни на одном сайте не воспринимает запреты в robots. ему пофиг. =) индексирует все. давно забил на это. пробовал удалят через "удаление страниц" в вебмастере. через какое-то время опять в индексе

Шустрый хостинг (https://accounts.fozzy.com/aff.php?aff=984) с адекватным саппортом, а тут покупаю комментарии (http://qcomment.ru/ref/3532)
12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий