Давно замечаю у себя в статистике обхода такие изменения: Было 200 OK – Стало 500 Internal Server Error. Потом в следующую дату обхода, или в эту же наоборот: Было 500 Internal Server Error – Стало 200 OK. Для того же URL. И так с разными страницами. По несколько штук в день (в дату обхода роботом).
У вас так же? Это нормально? Я так понимаю, в какой-то момент сервер не отвечает и выдает 500 ошибку. Но по нагрузке вроде все ок, ресурсы с запасом.
За последний год была такая же картина на двух проектах - сайт работает нормально, Яндекс "мигает 500-тыми ошибками".
В раз раз переписывался с поддержкой Яндекса порядка двух неделю, последовательно приводя примеры, что хостинг отдаёт исправный 200 ответ, а робот почему-то время от времени фиксирует 500-ую ошибку. Со временем проблема ушла (примерно ещё через неделю).
Во втором случай вопрос решился быстрее, так как были наработки прошлой переписки.
hndsmjack : Внезапно сайт перестал сканироваться через лягуху, лабрику и любой другой сканер. Никаких изменений не вносили, robots чист, сайт на wp, стоит all in one seo. В чем может быть проблема?
Свой сайт сканируете?
На момент сканирования через Screaming Frog с рабочего компьютера - сайт в браузере открывается?
Проблема как себя проявляет, SF вообще не сканирует или просто останавливается на каком-либо этапе?
Хоть десятилетиями. Это принципиально ничего не меняет.
Вопрос - какая доля из накрученного попадает в реальную статистику и влияет на показатели. Глобально этого не знает никто, кроме узкой части инженеров Яндекса, но определённые корреляции в своём сегменте можно отслеживать.
Badmaestro#: И не лень тебе на таких время тратить.)
Затраты совсем небольшие, написать за минуту пару абзацев - несильно утомительное действие 😉
А так, мне интересны рабочие ситуации. Их разбор нередко полезен, а когда получается непосредственно помочь - душевная радость. Для меня это тоже важно.
а можно получить ответ от представителя?
Такую информацию представители не освещают.
Никто из представителей детально о регламенте работы многорукого не расскажет.
Давно замечаю у себя в статистике обхода такие изменения: Было 200 OK – Стало 500 Internal Server Error. Потом в следующую дату обхода, или в эту же наоборот: Было 500 Internal Server Error – Стало 200 OK. Для того же URL. И так с разными страницами. По несколько штук в день (в дату обхода роботом).
У вас так же? Это нормально? Я так понимаю, в какой-то момент сервер не отвечает и выдает 500 ошибку. Но по нагрузке вроде все ок, ресурсы с запасом.
За последний год была такая же картина на двух проектах - сайт работает нормально, Яндекс "мигает 500-тыми ошибками".
В раз раз переписывался с поддержкой Яндекса порядка двух неделю, последовательно приводя примеры, что хостинг отдаёт исправный 200 ответ, а робот почему-то время от времени фиксирует 500-ую ошибку. Со временем проблема ушла (примерно ещё через неделю).
Во втором случай вопрос решился быстрее, так как были наработки прошлой переписки.
Может кто-то уже сталкивался с похожим и проводил расследование :)
Смотря в чём похожесть. Наплывы ботов повсеместно. Смотрите логи, изучайте характер поведения.
Самых назойливых баньте подсетями.
Есть тех. боты, есть парсеры, есть поведенческие. Везде своя линия работы.
С каждым случаем нужно разбираться отдельно.
просто интересно зачем?
Хотите, чтобы вам ответили люди, которые не имеют к этому отношения? :)
Вариантов множество, узнать конкретно ваш вряд ли возможно.
сканирует одну страницу, главную, дальше не идет.
Если хотя бы одну сканирует, значит физического запрета на доступ нет.
Проверьте ещё раз, нет ли запрета на обход/индексацию в:
- robots.txt
- в мета тегах
- в ответе сервера
CloudFlare используется?
Внезапно сайт перестал сканироваться через лягуху, лабрику и любой другой сканер. Никаких изменений не вносили, robots чист, сайт на wp, стоит all in one seo. В чем может быть проблема?
Свой сайт сканируете?
На момент сканирования через Screaming Frog с рабочего компьютера - сайт в браузере открывается?
Проблема как себя проявляет, SF вообще не сканирует или просто останавливается на каком-либо этапе?
то есть скорее всего, мух от котлет не отделить?
Глобально, думаю, что нет. В том смысле, что если трафика на страницах нет, то Яндекс потихоньку выкидывает такие страницы из индекса.
пф крутят годами в яше, какая динамика
Хоть десятилетиями. Это принципиально ничего не меняет.
Вопрос - какая доля из накрученного попадает в реальную статистику и влияет на показатели. Глобально этого не знает никто, кроме узкой части инженеров Яндекса, но определённые корреляции в своём сегменте можно отслеживать.
Я по НЧ и микроНЧ запросам такие изменения вижу.
И не лень тебе на таких время тратить.)
Затраты совсем небольшие, написать за минуту пару абзацев - несильно утомительное действие 😉
А так, мне интересны рабочие ситуации. Их разбор нередко полезен, а когда получается непосредственно помочь - душевная радость. Для меня это тоже важно.
Какие можешь порекомендовать?
Одно время любил ТГ чат Пиксель Плюс, но потом по человечески разочаровался и отписался.
Самый "светлый" SEO чат это https://t.me/seotusovochka.