Как добиться быстрой [пере]индексации большого сайта? - Форум об интернет-маркетинге
Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 26.10.2006, 17:34   #1
Академик
 
Аватар для AiK
 
Регистрация: 27.10.2000
Адрес: SPb
Сообщений: 2,895
Репутация: 107656
Социальные сети

По умолчанию Как добиться быстрой [пере]индексации большого сайта?

Не то, чтобы совсем не знаю , но тем не менее спрошу:
как ускорить процесс [пере]индексации большого (5К+ страниц) сайта?

У Гугля всё просто - он не любит слабые страницы. Например, типичная ошибка веб-программистов при организации paginator'а (длинный список с цифирьками [1] [2] [3] ... [1000]), когда с морды ставится ссылка на /dir/index.html, а в paginator'е под цифрой [1] ссылка идёт на /dir/index1.html. В итоге, все страницы в paginator'е будут слабыми и будут плохо индексироваться. Соответственно решением для улучшения индексации является "грамотная перелинковка" (чем больше внутренних ссылок ведёт на каждую страницу, тем лучше она индексируется, при этом нужно избегать "подвешеных" страниц и тем более разделов сайта, т.е. не терять связь с "предками", как в вышеприведённом примере) и простановка внешних ссылок на узловые страницы/разделы.

В Яндексе не всё так очевидно, но, исходя из общих соображений, рецепт будет скорее всего таким же.

А как ускорить переиндексацию? Допустим, с перелинковкой всё хорошо, но на одном из подразделов меняется контент у большого количества страниц (например, поменяли тайтлы и заголовки Hx). Есть ли способ намекнуть боту, что раздел пора переиндексировать?
AiK вне форума   Ответить с цитированием

Реклама
Старый 26.10.2006, 17:36   #2
Sla_Dom
Connoisseur of tea
 
Аватар для Sla_Dom
 
Регистрация: 18.02.2006
Адрес: άҝάдемĩҝ без ПМЖ
Сообщений: 2,412
Репутация: 131851
Отправить сообщение для Sla_Dom с помощью ICQ Отправить сообщение для Sla_Dom с помощью Skype™ Send Message via Jabber to Sla_Dom

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта

Первое чт оприходит - сделать карту хорошенькую.
Можно сделать на жирной внутренней, или главной (если ссылок немного) страницы, а на ней вывести все ссылка на страницы ,которые необходимо проиндексировать заново
__________________
Подпись отключена за неуплату.
Администрация.
Sla_Dom вне форума   Ответить с цитированием
Старый 26.10.2006, 18:40   #3
jED R.
engineer
 
Аватар для jED R.
 
Регистрация: 22.03.2005
Адрес: Кракожия
Сообщений: 3,318
Репутация: 83240

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта

AiK, слухайте, а если ваш большой сайт по частям вынести на поддомены, и все их добавить как разные сайты чтоб не склеялись, не пойдет?
jED R. вне форума   Ответить с цитированием
Старый 26.10.2006, 18:51   #4
AiK
Академик
 
Аватар для AiK
 
Регистрация: 27.10.2000
Адрес: SPb
Сообщений: 2,895
Репутация: 107656
Социальные сети

ТопикСтартер Re: Как добиться быстрой [пере]индексации большого сайта

Sla_Dom, ну, допустим, на маломеняющемся сайте можно ещё и 304 Not Modified управлять индексацией. А если на сайте, допустим, ежедневно публикуется несколько десятков новостей? А раздел, который нуждается в переиндексации в общем-то статичный?
jED R., для Гугля такой вариант вполне подойдёт. Т.е. можно вынести раздел на поддомен и сделать 301-й редирект, чтобы не терять внешние ссылки. А вот с Яндексом непонятки. Если я правильно помню, то пока поддомен не описан в Я.К. он расценивается Яндексом как подкаталог. Кстати, похоже решение найдено Вынос на поддомен + регистрация его в Я.К. должно помочь. Кто-нибудь пробовал на практике?
AiK вне форума   Ответить с цитированием
Старый 26.10.2006, 19:02   #5
jED R.
engineer
 
Аватар для jED R.
 
Регистрация: 22.03.2005
Адрес: Кракожия
Сообщений: 3,318
Репутация: 83240

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта

Цитата:
Вынос на поддомен + регистрация его в Я.К. должно помочь. Кто-нибудь пробовал на практике?
Частенько видывал что разбивали разделы не на поддомены, а на домены, как к примеру делают крупные организации разбивая сайты на департаменты, т.е. dep1-jedcorp.com, dep2-jedcorp.com, такое популярно у буржуев, но не думаю что это задумка с целью подстроиться под ботов
Такое по идеи и в каталог охотнее возьмут.
jED R. вне форума   Ответить с цитированием
Старый 26.10.2006, 19:10   #6
Miha Kuzmin (KMY)
Аудиты, консультации
 
Аватар для Miha Kuzmin (KMY)
 
Регистрация: 05.05.2003
Адрес: Чехов
Сообщений: 29,912
Репутация: 2025365

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта?

AiK, берем гесты (ну любые доступные ссылки, к примеру), и кидаем по нужным разделам.
Miha Kuzmin (KMY) вне форума   Ответить с цитированием
Старый 26.10.2006, 19:13   #7
jED R.
engineer
 
Аватар для jED R.
 
Регистрация: 22.03.2005
Адрес: Кракожия
Сообщений: 3,318
Репутация: 83240

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта?

Цитата:
Сообщение от Miha Kuzmin (KMY)
берем гесты
Вот так и становятся спамерами
jED R. вне форума   Ответить с цитированием
Старый 26.10.2006, 19:34   #8
Lisa
Super Moderator
 
Аватар для Lisa
 
Регистрация: 31.01.2002
Адрес: Подмосковье
Сообщений: 7,955
Репутация: 1256661

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта?

AiK, вынести через robots, дождаться и добавить заново?
Lisa вне форума   Ответить с цитированием
Старый 26.10.2006, 19:37   #9
Bloody dude
Очевидец
 
Аватар для Bloody dude
 
Регистрация: 16.03.2006
Адрес: Україна
Сообщений: 881
Репутация: 9045

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта?

Постараюсь максимально сократить количество букв.

Исходные. Есть сайт, разработчики которого оказались людьми весьма креативными. Сайт обновляется еженедельно. В момент обновления документы (100-250 шт.) получают "временный" урл, а те, которые висели на гл.странице до этого, вместо данного "временного" получают статичный урл. При этом смена урла происходит 302-м редиректом. В программировании и пр. я близок к дауну, поэтому об этой замечательной особенности задумался только после полугодового наблюдения за белибердой, которая творилась в серпе. Да и понял еще не все, но мне уже достаточно. Когда осознал, начал ставить в огромном количестве ссылки с новых документов на те, которые уже получили статичный урл. С особо важными страницами еще и развлекаюсь колупанием в архивах, откуда тоже ставлю ссылки. Ситуация кардинально изменилась - в серпе стало поприличнее, количество проиндексированных страниц растет. Для чистоты эксперимента сейчас сознательно теряю тиц, ссылочное и пр. (на "временные" урлы постоянно появляется приличное количество естественных бэков, которые после апов по понятным причинам помирают, если не скопипащены вместе с моими "внутренними"). Через пару-тройку недель статичные урлы будут появляться сразу - эксперимент уже считаю удачным.

По накопившемуся опыту могу сказать, что Яндекс полностью переиндексировал страницы, на которые я ставил ссылки, в течение 1-6 недель. Сайт большой (несколько десятков тысяч страниц), но естественно, задача полной переиндексации пока не стоит - если ставить ссылки на кажду страницу вручную, то проживу не долго и не счастливо. Уже переиндексировалось порядка 1-1,5 тыс. страниц.

Автоматизация процесса, на мой взгляд, не так, чтоб невыполнимая задача. Естественно, даже после автоматизации будет много ручной работы, но она не будет такой тупой, как то, чем я сейчас занимаюсь (при заливке на сайт поиск-просмотр-ссылка). Существенных плюсов два - можно добавлять страницам, которые необходимо переиндексировать, веса по низкочастотникам. Ежедневное обновление в данном смысле - огромнейший плюс.

Правда, сайт, который описываю, довольно "авторитетный" + большое количество постоянно появляющихся внешних ссылок, с помощью которых можно решать аналогичные задачи. Если вес невысок, то ждать, наверное, придется дольше.
Bloody dude вне форума   Ответить с цитированием
Старый 26.10.2006, 19:38   #10
HruPifPaf
Профессор
 
Регистрация: 30.05.2006
Сообщений: 778
Репутация: 11765
Отправить сообщение для HruPifPaf с помощью ICQ

По умолчанию Re: Как добиться быстрой [пере]индексации большого сайта?

У меня гугль и так индексирует по 50.000 страниц в день, так что ничего делать не приходится. С яндексом, когда стояла задача быстро переиндексировать, я добавил зеркало сайта под другим доменом, которое за 2 месяца успешно переиндексировалось и склеилось с основным сайтом.
IMHO меньше чем за 2-4 месяца заставить яндекс переиндексировать такое количество страниц не получится.
HruPifPaf вне форума   Ответить с цитированием
Ответ




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 21:32. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны