Rambler и 301 редирект

bonzaza
На сайте с 10.06.2006
Offline
82
1363

Хочу поделиться наблюдениями, может кто подтвердит, а кто и опровергнет.

На одном из проектов необходимо было поменять названия некоторых страниц. Конечно не хотелось, что бы пользователи приходили на 404 (т.к. страницы уже были в индексе), да и зачем PR терять (хотя и небольшой он был), поэтому поставил я 301 редирект на некоторые страницы.

Наблюдение следующее: если до установки редиректа (середина апреля) StackRambler/2.0 заглатывал сайт целиком, то после установки картина изменилась. Если робот приходит и натыкается на страницу с 301, он автоматически перестает индексировать сайт до следующего захода. Если же он приходит на страницу без редиректа, то индексирует все страницы, пока не упирается в 301 и ситуация повторяется. Может у кого есть идеи по этому поводу?

Если не мы, то кто?
Y
На сайте с 12.09.2006
Offline
18
#1

есть наблюдения что рамблер не понимает 301 редирект.

для сайта был выбран основной домен с www

при заходе на сайт без www стоял 301 редирект на ту же страницу с www

рамблер каким-то образом выбрал основным доменом без www и упорно долбил в 301 редирект пока все страницы из индекса не выпали за 1,5-2 месяца (в индексе были страницы с www и без)

в результате для рамблера сделали исключение и разрешили индексировать сайт без www

bonzaza
На сайте с 10.06.2006
Offline
82
#2

редирект я ставил не на поддомен, что видно из моего поста и речь о поддоменах не шла 🙄

Почитав новые посты в этой ветке мне стало очевидно, что с Рамблер индексатором проблемы не только у меня, а я просто ошибочно воспринял его редкие заходы с установкой 301 редиректа со старых на новые страницы

тему можно закрывать

Doc Spoc
На сайте с 10.04.2007
Offline
118
#3

Значит ли вышесказанное что такая склейка:

RewriteEngine On

Options +FollowSymlinks

RewriteBase /

RewriteCond %{HTTP_HOST} ^mysyte.ru

RewriteRule ^(.*)$ http://www.mysyte.ru/$1 [L,R=301]

RewriteCond %{QUERY_STRING} .+

RewriteRule ^/*$ http://%{HTTP_HOST}/? [R=301]

будет для Рамблера губительна?

Y
На сайте с 12.09.2006
Offline
18
#4

нельзя утверждать что будет губительна для всех, может в вашем случае рамблер выберет основным домен www.mysyte.ru то никаких проблем не будет

каким образом он выбирает - не знаю.

просто описал факт поведения рамблера

forme
На сайте с 30.01.2007
Offline
17
#5

Тоже с этим столкнулся. из 5000 страниц осталось меньше 500...

Редирект стоит через htaccess. и как же в таком случае сделать исключение для рамблера?

forme
На сайте с 30.01.2007
Offline
17
#6

Пришлось снять редирект... ни host в роботс.тхт, ни письма в саппорт не помогли..

Как только снял, робот сразу пришел.

Неужели нет нормального решения?

[Удален]
#7

У меня в .htaccess прописано:

ErrorDocument 404 /index.shtml

ErrorDocument 403 /index.shtml

ErrorDocument 500 /index.shtml

Было такое дело: был многостраничный проиндексированный рамблером форум, потом его снес и поставил в другой папке, прошел почти год - старый форум до сих пор в индексе, и новый нормально индексируется.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий