Яндекс.Вебмастер - влияние 301 редиректа на данные по загрузке и структуре

Megamozg
На сайте с 25.09.2006
Offline
147
1905

Что-то я немного запутался в данных по Яндекс.Вебмастер...

Есть сайт на котором загружено 2400 страниц, в индексе 800 страниц.

У каждой страницы есть 3 урла по которым настроены редиректы:

урл1-->301-->урл2-->301-->урл3 (последний адрес ЧПУ по которому сейчас доступны страницы)

Система редиректов конечно страшная, но так уж исторически сложилось на сайте.

1. По количеству загруженных страниц (данные из Яндекс.Вебмастер) очень похоже, что тут учитываются страницы с 301 редиректом. Кто-нибудь может это подтвердить или опровергнуть?

2. В структуре сайта (по версии Яндекс.Вебмастер) показаны разделы с которых давно настроены 301 редиректы. Они что там так и будут торчать пока на старых урлах стоят редиректы и структуры с новыми урлами в Яндекс.Вебмастере мне не увидеть?

Получается, чтобы увидеть реальное количество "мусорных" страниц, которыя Яндекс загружает но выкидывает из индекса нужно грохнуть все редиректы? И чтобы увидеть, как яндекс понимает структуру новых урлов тоже нужно грохнуть все редиректы?

Не надо курить много китайской травы...
K
На сайте с 31.01.2001
Offline
737
#1
Megamozg:
По количеству загруженных страниц (данные из Яндекс.Вебмастер) очень похоже, что тут учитываются страницы с 301 редиректом

Там все урлы, про которые "помнит" Яндекс. А помнит он их долго, даже если там 301 или 404.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Megamozg
На сайте с 25.09.2006
Offline
147
#2

Кстати говоря, здесь в пункте 8 написано:

Что будет делать робот со страницей, на которой стоит redirect? А если используется директива refresh?

Получив в заголовке ответа информацию, что данный URL является редиректом (коды 3хх), робот Яндекса добавит адрес, на который ведет редирект в список адресов для обхода. Если редирект является постоянным (код 301 или страница содержит директиву refresh), то старый URL будет исключен из списка обхода.

А вот здесь в пункте 3 написано:

Что означает "загружено роботом"?

Количество страниц вашего сайта, к которым робот Яндекса успел обратиться. Среди них могут быть как проиндексированные страницы, так и страницы, при обращении к которым получена ошибка.

Вот тут то и возникает непонятка - "успел обратиться" - это типа за все время существования сайта успел обратиться или при последнем обходе сайта?

По логике - если Яндекс исключает из списка обхода страницы с 301 редиректом, он не должен к ним обращаться и отображать их в количестве загруженных страниц. Но на деле получается совсем по другому.

И как же долго Яндекс будет обращаться к с траницам с 301 редиректом, до того, как исключит их из списка обхода?

M
На сайте с 25.03.2009
Offline
44
#3
Megamozg:

1. По количеству загруженных страниц (данные из Яндекс.Вебмастер) очень похоже, что тут учитываются страницы с 301 редиректом. Кто-нибудь может это подтвердить или опровергнуть?

стоит с моего сайта ссылка на ваш сайт, на страницу которой нет, почему яндекс её должен не учитывать и не ходить по ней?

/ru/forum/comment/1592771 () =)
Megamozg
На сайте с 25.09.2006
Offline
147
#4
mlsha:
стоит с моего сайта ссылка на ваш сайт, на страницу которой нет, почему яндекс её должен не учитывать и не ходить по ней?

Речь не о ссылках, а об обходе роботом страниц с 301 редиректом и учете этих страниц в данных о "загруженных страницах" и в структуре, что намного усложняет чистку сайта от "мусора" и другие манипуляции по улучшению индексации сайта.

M
На сайте с 25.03.2009
Offline
44
#5
Megamozg:
Речь не о ссылках, а об обходе роботом страниц с 301 редиректом и учете этих страниц в данных о "загруженных страницах" и в структуре, что намного усложняет чистку сайта от "мусора" и другие манипуляции по улучшению индексации сайта.

ну здрасти, получается, сначала вэбмастера там у себя что-то на сайтах понавымудрят, а яндекс потом получается виноват в том, что кому-то не угодил...

зачем вообще нужен этот тройной редирект-то? удалите несуществующие страницы и всего делов...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий