Медленная индексация

GO
На сайте с 11.08.2009
Offline
0
966

Уважаемые!

Наблюдаем такую ситуацию. Примерно 2 месяца назад началась "свистопляска" с приходом робота. Изначально он проходил порядка 17.000 страниц в день регулярно, потом началось... один день 10.000 пару дней 500. потом опять 15.000... потом неделю 500 и т.д.

В конечном итоге все свелось к тому, что сейчас Яндекс забирает не более 300-400 страниц в день.

Обращение в саппорт - стандартный ответ на счет соблюдения правил для ускорения индексации:

1. в robots.txt запретить все лишнее - запрещено давно

2. создать sitemap - создали, общее кол-во URL в сайтмапах > 400K

3. создайте карту сайта - была давно

В итоге Яндекс сайтмапы обработал только спустя месяц после загрузки и указания их ему явно. Из 400К урлов из сайтмапов обработано 136 (!).

При этом Гугл регулярно забирает в сутки от 40К до 90К страниц. После обновления сайтмапов, Гугл умерил пыл до 30-40К в сутки. Мэйл.ру стандартно забирает свои 1.5К в сутки и другие Рамблеры так же.

И даже робот Яндекса может прибежать ночью, за час собрать 1000 страниц и потом опять в режим 2-3 страницы в час.

Что с Яндексом? Хотел понять - проблема только у меня или еще кто-то заметил подобное поведение робота в последнее время?

Statrega
На сайте с 02.10.2008
Offline
55
#1

у знакомого человека....примерно такая же ситуация...что т яндекс мутит(

Всегда в поиске площадок для размещения статей тематики: сми, недвижимость
Datot
На сайте с 09.07.2007
Offline
1128
#2
GAZEBO:
Наблюдаем такую ситуацию. Примерно 2 месяца назад началась "свистопляска" с приходом робота. Изначально он проходил порядка 17.000 страниц в день регулярно, потом началось... один день 10.000 пару дней 500. потом опять 15.000... потом неделю 500 и т.д.
В конечном итоге все свелось к тому, что сейчас Яндекс забирает не более 300-400 страниц в день.
В итоге Яндекс сайтмапы обработал только спустя месяц после загрузки и указания их ему явно. Из 400К урлов из сайтмапов обработано 136 (!).

И т.д.

Не посчитайте за провокацию, а что это за Библиотека имени Левого, где КАЖДЫЙ день выкладывается столько тысяч страниц, а Яндекс и другие их "кушают", и все уник, раз кушают.

Покажите сообществу.

Из 400К урлов из сайтмапов обработано 136

Я бещ провокации. ПРосто интересно

Накрутка ПФ @samdatot Группа полезных сеошников https://t.me/karkali Что надо знать владельцам сайтов https://dzen.ru/tunnel.ru
SI
На сайте с 01.06.2009
Offline
21
#3

Походу парни нашли утраченную библиотеку Ивана Грозного и потихоньку сканят и выкладывают 😂

Сделав выбор, становишься беднее: теперь миллионы возможных дорог свелись к одному единственному пути.
Bitman
На сайте с 05.07.2009
Offline
112
#4

это блог. просто много пишут

Северный лес (https://euro-vagonka.by) DREW (https://drew.by) AvtoDrive (https://avtodrive.by)
[Удален]
#5

Да, действительно было бы интресно посмотреть на такой ресурс, где более 400к урлов для индексации.

K
На сайте с 31.01.2001
Offline
737
#6
alegra:
было бы интресно посмотреть на такой ресурс, где более 400к урлов для индексации.

Как-то тут выясняли, что есть ресурсы, где проиндексировано Яндексом больше миллиона страниц.

Например news.mail.ru - 4 лимона.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Links Forever
На сайте с 20.08.2006
Offline
329
#7

Сколько страниц - не важно, важно качество. У меня форум есть, на нем 150 000 страниц, правда я большую часть закрыл (страницы календарей, профили и т.д.) в итоге в Я более 30 000 проиндексированных. И все нормально есть, правда скорость добавления не такая большая.

Я очень люблю вкусные рецепты (https://povar24.info) квашеной капусты (https://kvashenaya-kapusta.ru/) и салат оливье (https://salatolive.ru/).
sergey24
На сайте с 12.08.2005
Offline
180
#8

КСТАТИ у меня та же петрушка :)

ресурс справочник компаний - из 200 000 в индексе 22000

за 3 месяца :)

это произошло после смены зеркала, до этого проблем не было.

[Удален]
#9

ну а сайт можно увидеть, может быть все просто в перелинковке и недостаточностью беков с ресурсов по которым ходит быстроробот?

OL
На сайте с 09.04.2009
Offline
41
#10

Ну 400К или 4М понятно, что долго. Я вот засунул новый сайт (150 страниц) в Я-вебмастер аж 24-го июля и до сих пор в интерфейсе написано, что не проиндексирован, хотя реально часть страниц уже проиндексирована и даже трафик с него больше чем с гугла, хотя гугл проиндексировал почти все страницы уже. Кто знает, так и должно быть ?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий