Не выкидывает из индекса страницы

12
one
На сайте с 15.04.2007
Offline
336
one
735

По каким причинам может не выкидываеть из индекса страницы запрещенные в роботс?

Решения для автоматизации действий ( https://www.facebook.com/automationstudio20/ ) в интернете.
W
На сайте с 13.12.2007
Offline
89
#1
one:
По каким причинам может не выкидываеть из индекса страницы запрещенные в роботс?

Что значит не выкидывает - вообще без изменений или перемещает в дополнительный индекс со сниппетом "A description for this result is not available because of this site's robots.txt – learn more."

В вебмастере показывает, что роботс обновился?

one
На сайте с 15.04.2007
Offline
336
one
#2
webdoctor:
Что значит не выкидывает - вообще без изменений или перемещает в дополнительный индекс со сниппетом "A description for this result is not available because of this site's robots.txt – learn more."

Просто вижу их в индексе ПС.

В вебмастере показывает, что роботс обновился?

Да, там все в порядке... Изменения в роботс внесены пару месяцев назад...

Ripro
На сайте с 04.11.2006
Offline
144
#3

one, 1. гугл очень долго пережевывает

2. страницы закрыты от индексации в коде страниц?

Попробуйте закрыть на странице и открыть в роботс, иногда помогает. Но быстро все равно не будет. Быстро - только удалить из кеша в WMT

one
На сайте с 15.04.2007
Offline
336
one
#4
Быстро - только удалить из кеша в WMT

т.е. ручками? Там по моему было из кеша и индекса... Как то так.

Ripro
На сайте с 04.11.2006
Offline
144
#5
one:
т.е. ручками? Там по моему было из кеша и индекса... Как то так.

Ручками, да. Зато быстро - пара часов и все. Можно не поштучно, а каталогами.

one
На сайте с 15.04.2007
Offline
336
one
#6
Ripro:
Ручками, да. Зато быстро - пара часов и все. Можно не поштучно, а каталогами.

Спасибо, про каталоги только сейчас прочитал. Страниц много мусорных. Ручками поштучно тяжко как то. :)

VE
На сайте с 17.08.2006
Offline
76
#7

2 Ripro

Смотрю вы в нескольких темах высказались на счет роботса.

Позвольте сказать (вписываюсь):

meta noindex никто не отменял.

И ваше высказывание, что это не работает - полный фуфел - ибо эта конструкция и инструкция для бота заложена в поисковиках, а не в левых ботах. Изначально (altavista, exsite, etc).

Если у вас что-то протекло, как вы говорили челу с другого топика - у меня с таким тэгом ни одна страница с 1998 года не протекла.

Конец спора. Аминь.

С Новым Годом.

>> 1. гугл очень долго пережевывает

Ни-фи-га - 3-8 часа(ов) при нормальном сайте - да и не сильно посещаемом. Странно не знать.

Sower
На сайте с 30.12.2009
Offline
651
#8

Закрытые страницы могут по прежнему отображаться годами, но с описанием типа "содержимое данной страницы закрыто...", а в качестве заголовка может стоять анкор из любой ссылки (если таковые присутствуют).

Страницы с актуальным описанием должны по вылетать в течении 3 месяцев, если не ошибаюсь.

Каталоги, да, можно удалять в WMT.

__________________Бесплатная накрутка ПФ: посещаемость, просмотры, переходы с поисковиков по ключевикам, итд.
__________________Все посетители живые, не боты. (http://livesurf.ru/promo/80271)
VE
На сайте с 17.08.2006
Offline
76
#9

2 Sower

Честно извиняюсь, но, если вы укажите странице noindex она исчезнет в небытие, кроме веб-архивов. Проверяйте.

Если не верите. Создайте левцю стр. на сайте 1 - про унитаз - скормите - и потом, когда увидете в поиске - вкл. meta noindex, nofollow (например).

И - чудо 2-3 дня (google), 7 yandex - нет страницы - если бот ходит каждый день.

<kby? ye [dfnbn ckeifnm b xbnfm ktdst cjdtns/ (хотел поменять кодировку :)

ЗЫ

- А как раньше вз вабмастер-тулов яши и гоши жили - это в тему топика А???

- В той же HTML5 тэги мета кто-нить отменил? И мета-роботс?

- Отвлекитесь от стд. двигов и просто прикиньте страничку-другую в голом HTML. Как? Что крутить?

Посему - аккураттнее давайте советы, плз. Нарываться на ваших клиентов становится томно.

Sower
На сайте с 30.12.2009
Offline
651
#10
view'er:
2 Sower
Честно извиняюсь, но, если вы укажите странице noindex она исчезнет в небытие, кроме веб-архивов. Проверяйте.

Если не верите. Создайте левцю стр. на сайте 1 - про унитаз - скормите - и потом, когда увидете в поиске - вкл. meta noindex, nofollow (например).
И - чудо 2-3 дня (google), 7 yandex - нет страницы - если бот ходит каждый день.
<kby? ye [dfnbn ckeifnm b xbnfm ktdst cjdtns/ (хотел поменять кодировку :)

Спорить не буду, возможно.

Обычно блокирую не мета тегами а файлом robots.txt

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий