Как сократить разницы "Загружено роботом" и "Страниц в поиске"?

Пуся, /ru/forum/comment/12713169

За что были наложены санкции?

Это так и осталось загадкой - магазин был чисто торговой площадкой, реклама только внутренних позиций, ссылок вовне почти нет, достаточно ненагруженный интерфейс. Единственное, что произошло непосредственно перед попаданием в фильтр это было добавление онлайн-консультанта. Далее письмо Платону, убрали консультант - 500 страниц вернулось. Ответ Платона был стандартный

---------- Добавлено 19.03.2014 в 12:14 ----------

Там были и товарные позиции обычные для всех интернет-магазинов, так контент там есть, но да - он встречается и во многих других магазинах.

Статья очень хорошая спасибо. Другое дело не раскрыто собственно КАК занести почти все позиции в индекс. Они каждый апдейт я так понимаю смотрели какие страницы бот прошел и какие в итоге занеслись, а какие нет и в чем разница между ними? Интересно сколько у них времени занял такой анализ.