Яндекс и Google не индексируют динамику, а Рамблер это делает спокойно!??

В
На сайте с 08.05.2004
Offline
1
856

У меня несколько сайтов построенных на PHP и MySql.

С помощью Mod_rewrite все URL страниц приведены к виду http://domain/page-1234.htm.

С помощью header прописаны кодировка и дата обновления.

Спамерских приемов не использую.

Видимо благодаря этому Рамблер охотно всё индексирует.

Однако с Яндексом творится что-то непонятное:

Сначала он нормально проиндексировал ок. 5000 страниц, а в апреле всё начал выкидывать. И сейчас остались только статичные страницы.

Я было решил, что ему не нравится контент, уже знакомый ему по сайтам моих партнеров. Добавил в каждую страницу ок. 50% контента, который можно расценивать как уникальный (фрагменты результатов поиска из Апорта и самого Яндекса). За последние 10 дней робот Яндекса просмотрел более 7000 страниц, но ни одну не добавил в свою базу.

Гугль делает то же самое с моими англоязычными сайтами.

Может кто-нибудь сталкивался с подобной проблемой и подскажет как её решить или в чем тут дело?

Васильич
МП
На сайте с 26.04.2004
Offline
3
#1

дело в том что и гугл и яндекс сначала "смотрит" потом они появляются в индексе. 10 дней - возможно рановато...

В
На сайте с 08.05.2004
Offline
1
#2

Нет, не в этом дело. Наблюдаю это давно, просто пример привел свежий. С Гуглем эта проблема почти полгода.

А про Яндекс говорят, что базу обновляет 2 раза в неделю - во вторник и в пятницу.

Выкидывать уже проиндексированное начал он с начала апреля.

K
На сайте с 31.01.2001
Offline
737
#3
Добавил в каждую страницу ок. 50% контента, который можно расценивать как уникальный (фрагменты результатов поиска из Апорта и самого Яндекса)

нельзя ли с этого места поподробнее?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Каширин
На сайте с 03.01.2004
Offline
1030
#4
Как писал Kost
нельзя ли с этого места поподробнее?

Это, конечно, первое подозрение.

Но не только здесь могла порыться собака. Какие роботы заходят - useragent - в студию. Если это подсветчик - не удивительно, что страницы не индексируются.

В
На сайте с 08.05.2004
Offline
1
#5

Если это подсветчик - не удивительно

_______________________________________

А кто такой подсветчик? Впервые слышу.

В
На сайте с 08.05.2004
Offline
1
#6

Вопрос к Каширину:

Что вы имели ввиду на счет "первого подозрения"?

Причина в знакомом основном контенте или в добавке от поисковиков?

Уточните, пожалуйста.

D
На сайте с 23.11.2003
Offline
167
dmt
#7
А кто такой подсветчик? Впервые слышу.

Читай хотя бы тут:

А вообще:

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий