Опыт: запрет индексации в robots.txt

12
CityCat
На сайте с 26.01.2008
Offline
140
1409

Здарова!

Информирую: запретил индексацию для "Яши" в robots.txt 3 августа пару папок. До сих пор всё содержимое в общем доступе. Хотя судя по отчётам поисковика робот последний раз проходил 8 августа сего года.

Что интересно, "Гоша" выкинул из индекса содержимое папки 5 числа сего месяца.

Joomla!
empowered
На сайте с 16.10.2009
Offline
88
#1

На пределе по датам, точнее даже за пределом.

http://tools.promosite.ru/

Stanok
На сайте с 26.04.2010
Offline
89
#2
CityCat:
Здарова!

Информирую: запретил индексацию для "Яши" в robots.txt 3 августа пару папок. До сих пор всё содержимое в общем доступе. Хотя судя по отчётам поисковика робот последний раз проходил 8 августа сего года.

Что интересно, "Гоша" выкинул из индекса содержимое папки 5 числа сего месяца.

Информирую: надо подождать еще ап, может два.

Справиздат
На сайте с 05.12.2007
Offline
103
#3
CityCat:
Информирую: запретил индексацию для "Яши" в robots.txt 3 августа пару папок. До сих пор всё содержимое в общем доступе.

И подпись: "Ваш Мегафон".

😂

шо маемо, тэ маемо
overnight
На сайте с 23.05.2008
Offline
262
#4

Просто рано. Гугл быстрее.

CityCat
На сайте с 26.01.2008
Offline
140
#5

С другой стороны, чего "Яша" такой тормоз? Денег вроде навалом, почему частоту индексации то не изменить? Это всего лишь рунет.

Stanok
На сайте с 26.04.2010
Offline
89
#6
CityCat:
всего лишь рунет.

😂 правильно, 100Кб всего весит, что там индексировать

BlackFx
На сайте с 06.05.2010
Offline
37
#7
CityCat:
Здарова!

Информирую: запретил индексацию для "Яши" в robots.txt 3 августа пару папок. До сих пор всё содержимое в общем доступе. Хотя судя по отчётам поисковика робот последний раз проходил 8 августа сего года.

Что интересно, "Гоша" выкинул из индекса содержимое папки 5 числа сего месяца.

На собственной практике, иногда запрещенные страницы висят месяцами в индексе. Дата сохраненной копии не обновляется и старое содержимое в общем доступе висит.

Рекомендую после запрета сразу удалить страницы через delurl, если их немного. А если много, написать в техподдержку с просьбой убрать все страницы из индекса, закрытые такими-то правилами в robots.txt.

Иначе можно долго будет ждать, пока они сами выпадут из индекса.

CityCat
На сайте с 26.01.2008
Offline
140
#8
BlackFx:

Иначе можно долго будет ждать, пока они сами выпадут из индекса.

Жопес с ПС "Яша". Я сделал проще, поменял URL страниц на 1 знак. Мне делать больше нечего как в его тухлом вебмастере страницы удалять. =)

Но кэш от этого не пострадал ((

А если по понятиям, нафига этот кэш? Пусть бы сливали уж в архив чтоль.

Stanok
На сайте с 26.04.2010
Offline
89
#9
CityCat:
А если по понятиям, нафига этот кэш? Пусть бы сливали уж в архив чтоль.

По понятиям предлагаю написать сюда http://volozh.moikrug.ru/, они разберутся и примут срочные меры к исправлению косяков

CityCat
На сайте с 26.01.2008
Offline
140
#10
Stanok:
По понятиям предлагаю написать сюда http://volozh.moikrug.ru/, они разберутся и примут срочные меры к исправлению косяков

Мне это не надо, им надо, то пусть и пишут.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий