Вылетело 20k страниц из Рамблера

Web-Silver
На сайте с 02.05.2007
Offline
256
852

Добрый день!

Вчера было: 22001 страниц

Сегодня: 417 (!!!) страниц

Кто-нибудь еще наблюдает такое?

G
На сайте с 10.03.2006
Offline
103
#1

пишите ихнему супорту :)

Web-Silver
На сайте с 02.05.2007
Offline
256
#2

greates, слово "ихнему" порадовало))) Перед тем как создать тему - туда и отписал, просто интересно - может это массовое явление и особо волноваться не стоит? Траф то упал значительно...

Y
На сайте с 25.10.2007
Offline
198
#3

Была такая же фигня написал платону, через час всё ок.

KA
На сайте с 12.11.2005
Offline
40
#4
yaltabes:
Была такая же фигня написал платону, через час всё ок.

Речь идет про рамблер, а платон, насколько я знаю, это Яндекс :)

Web-Silver
На сайте с 02.05.2007
Offline
256
#5

Konopliov Anton, видимо так называют уже любых сотрудников саппорта ПС))))))))))))))

Web-Silver добавил 23.04.2008 в 06:04

Получил ответ от саппорта, который меня честно говоря впечатлил:

При очередной переиндексации в соответствии с директивой Вашего файла
"robots.txt" ("Disallow: /forum/") все ссылки на данный раздел Вашего
сайта были уничтожены. Подобная директива трактуется роботом как
полное запрещение индексирования раздела.

Смотрим мой robots.txt:


User agent: Slurp
Disallow: /forum/

Вопрос: я что-то пропустил и робот Рамблера стал реагировать на директивы для Yahoo???

Web-Silver
На сайте с 02.05.2007
Offline
256
#6

Разобрались, ошибка у меня была.

У меня:

User agent: Slurp

А надо:

User-agent: Slurp

Соответсвенно из-за этого робот Рамблера и выкинул весь форум из индекса...

Avia
На сайте с 21.04.2007
Offline
33
#7

Похоже робот стал иначе реагировать на директивы в роботс.тхт.

Недавно выплюнул весь сайт, в индексе ранее было около 30к страниц. После письма в саппорт оказалось, что на автомате он стал считать главным зеркалом домен с www (была прописана директива host:). Почему после этого сайт выпал из индекса, объяснить не смогли, спустя неделю он начал индексироваться, но в индексе всего 30 страниц...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий