Как правильно избавиться от более 1.5 млн. станиц загруженных роботом?

12
Sektor
На сайте с 22.04.2008
Offline
23
766

Я являюсь администратором сайта www.foliant.info, на основании системы Яндекс.Вебмастер роботом поисковой системы загружено около 1 600 000 страниц, а в поиске находиться чуть больше 80 000. В действительности очень много страниц осталось со старого дизайна сайта. Был написан 301 редирект, чтобы данные страницы и пользователи не терялись, а перенаправлялись на главную страницу (http://gyazo.com/ed569d4c50793fe8256941b2c7226af5.png) (но редирект написан очень неудачно ввиду его сложности, и страница главная отображается, а её url не изменяется). Хотел бы услышать совет по поводу возможности ускорения индексации сайта, а то получается, что страницы эти загружены роботом и хранятся в базе, а реально может получаться, что пользователи вводя запросы, в снипетах получают данные уже не существующих организаций, по которым идет много звонки на номера организаций уже занимающихся абсолютно другой деятельность (http://gyazo.com/f4d62637b4e1452e69ba3e4f646a6a1d.png). Или может дадите совет, что сделать для того, чтобы избежать таких ситуаций. Все имена страниц сейчас на кирилице (http://www.foliant.info/Телефонный справочник Фолиант/64_1_УСЛУГИ БЫТОВЫЕ/279_2_АТЕЛЬЕ УСЛУГИ ПО ПОШИВУ И РЕМОНТ/77750_ОРХИДЕЯ АТЕЛЬЕ.html) (но есть в планах в ближайшем будущем сменить их на латиницу).

Или может кто нибудь поможет написать такой редирект, чтобы со страницы плана http://www.foliant.info/?page=catalog&ToCity=8&ToPodRubrice=389 перебрасывалось на главную?

K
На сайте с 31.01.2001
Offline
737
#1

Думаете, робот быстро обойдет 1.5 млн страниц, чтобы увидеть все ваши редиректы?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Sektor
На сайте с 22.04.2008
Offline
23
#2

301 редирект то тоже не вчера написан, где-то в начале мая

IZmoskvy
На сайте с 18.12.2006
Offline
211
#3

С robots.txt поработайте.

Делаю видео и проморолики. Имеется сетка сайтов Московских организаций для размещения ваших статей со ссылками. Профессионально занимаюсь созданием и продвижением сайтов ( https://8saitov.ru ).
Sektor
На сайте с 22.04.2008
Offline
23
#4

все что можно от индексации закрыл.

разве можно закрыть как то страницу такого плана http://www.foliant.info/?page=catalog&ToCity=8&ToPodRubrice=389, да если честно то и закрывать не хочется так как потеряю ссылок много.

S
На сайте с 28.10.2005
Offline
319
#5

> но редирект написан очень неудачно ввиду его сложности, и страница главная отображается, а её url не изменяется

Это не редирект 😂

Sektor
На сайте с 22.04.2008
Offline
23
#6

насчет редиректа согласен, это один из способов решить проблему ☝, но вот не получается его сделать((((

S
На сайте с 28.10.2005
Offline
319
#7

Контент главной получилось ведь отдавать

Sektor
На сайте с 22.04.2008
Offline
23
#8

Главной да, но есть же много ссылок, которые стаяли на старый дизайн, их не хочется терять?

Я так понял вы 404 на всех выдавать предлагаете?

S
На сайте с 28.10.2005
Offline
319
#9

Да не, говорите редирект не можете сделать для 404, контент морды сумели ведь для таких страниц отдавать, не вижу проблем сделать редирект

Sektor
На сайте с 22.04.2008
Offline
23
#10

вообщем сделал так, всем страницам старых версий сайта, присвоенна 404 ошибка, а потом уже и редирект на главную, яндекс увидит 404 ошибку и исключит из индекса, а кто реально зайдет на страницу по старым ссылкам попадут просто на главную. Конечно пожертвовать пришлось весом старых ссылок, но для ускорения индексации будет получше думаю

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий