Нестабильность краулинга Яндекс

SU
На сайте с 27.02.2015
Offline
27
994

Всем привет. Заинтересовала одна тема, которую не нашел на серче. Тема касается crawl бюджета, работы краулера ПС.

1. Насколько важно следить за метрикой обхода документов Яндексботом?

2. Краулинг нестабилен, периодически исчезает (наприм. на часов 5-6), снова восстанавливается. Насколько это корректно?

Сразу сообщу, что идет постоянный мониторинг статуса site online 200 ok, чтобы исключить внутренние проблемы доступности для бота

LEOnidUKG
На сайте с 25.11.2006
Offline
1723
#1

В чём суть вопроса? Работают боты по своим алгоритмам и расписанию.

1. А что это изменит? Позвоните на горячую линию Яндекса и будете спрашивать куда исчез бот?

2. У вас есть план посещения бота на неделю, месяц? С чем сравниваете то?

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/
Alex Klo
На сайте с 15.06.2006
Offline
304
#2
SeoUnits:
Краулинг

вам русских слов не хватает? зачем придумывать новые непонятные слова?

а по сути - Вам Леонид уже ответил.

читайте правила обхода: https://yandex.ru/support/webmaster/controlling-robot/

Проверка и мониторинг позиций сайта ( http://www.topvisor.ru/?inv=1520 ) Продвигаю сайты http://climat-nw.ru/conditioner-installation/ http://www.aircom-spb.ru/service/montaj/
fillonon
На сайте с 24.12.2009
Offline
132
#3

и что дает вам это наблюдение за пауками?) позиции начинают расти или что?

Сайт знакомств - который скоро переплюнет Мамбу ( https://naytiparu.ru/ ), лучший массажер простаты ( https://happymans-xxl.ru/prostata-massager.html ) , Если нужно SEO продвижение ( https://seouspeh.ru/ )
Lone
На сайте с 27.02.2017
Offline
18
#4

У человека видимо на сайте всего 3 страницы, которые он постоянно мониторит. И это его забавляет в продвижении больше всего))

Или делай свою работу хорошо, или не делай ее вообще!
Smartp
На сайте с 25.04.2013
Offline
67
#5

Важно, чтобы сайт на момент обхода отдавал правильный ответ. Время обхода - роли не играет.

INWOXER seo
На сайте с 05.03.2016
Offline
52
#6

Тоже в свое время интересовался этим вопросам. С помощью соц. сетей загонял роботов, они сайт нон-стопом сканировали. Плюсы дало к индексации, также подцепил быстроробот.

★★★★★
[Удален]
#7
SeoUnits:
1. Насколько важно следить за метрикой обхода документов Яндексботом?

важно, главное что бы сканировал нужные документы, а не разный мусор

SeoUnits:
Насколько это корректно?

абсолютно нормально

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий