Палю тему? Стремительная индексация в Яндекс

Любопытно, что робот яндекса посещает страницы, но не заносит их в поиск. К примеру

37.140.141.8 - - [21/Sep/2014:13:52:23 +0400] "GET /index.php/razdel/935-novaya-statya HTTP/1.1" 200 28509 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Вроде бы, бот побывал на свежей еще не проиндексированной странице, но не занес ее в поиск. Кто виноват и что делать?))

значит он решил что на странице ничего хорошего нету. и это признак что с сайтом в целом чтото не то

Аналогичная ситуация с интернет магазином, молодой сайт! 100-150 страниц, всего 5 попали в поиск за 2-3 апа. Что за ХЗ !?

MinMart, у интернет магазинов это нормальная история, т.к. страницы не сильно то наполняются ввиду того, что они часто генерятся из прайса..

что их добавлять ПС, если таких уже миллионы в сети..

Зато у меня один сайт (адалт) быстробот стал жрать и загонять в индекс всё подряд.

Честно первый раз вижу что бы адалт загонялся быстроботом. Новые страницы максимум через час в индексе.

А через дней 10 он успешно включит эту страницу в поиск. Понаблюдаю за сроками. Остальные страницы сходу тоже не попадают, а попадают с задержкой. Гугл вообще с минимальной задержкой индексирует.

Сайт не молодой и индексация не начальная. Основная часть трафика как раз с Яндекса. Но поскольку некоторые вещи имеют отношение к новостям в определенной сфере, то сроки попадания статьи в индекс играют значимую роль.

Мне еще помогает прогон новых страниц по twitter, после чего также в течении часа влетают в индекс)

Сколько времени идет наполнение в данном режиме?

Регулярно. Могут быть недельные перерывы в году. Но можно считать, что постоянно, за исключением выходных. То есть, в рабочую неделю в день по паре-тройке статей в среднем по 2000 символов.

---------- Добавлено 24.09.2014 в 13:59 ----------

Может быть от профиля твиттера зависит. В моем случае, попробовал на старом забытом погонять пару недель назад, результат нулевой.

Возможно, у меня фолловеров ~2K