Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

ScreamFrog сканирует страницы с 503 ответом, а они отдают 200

SN
На сайте с 28.03.2017
Offline
50
seo-nerpa
454

Бывало ли такое? Я сканирую сайт Screaming Frog ом - сайт где то на 1000 страниц - и он показывает, что большинство страниц отдает 503 код. Я проверяю эти страницы другими сервисами - говорят что Яндекс и Google видят их 200-ми. В Скримин Фрог таким образом определилось всего 18 страниц. С чем это может быть связано?

W
На сайте с 08.02.2017
Offline
196
wicker
#1

лягуха кладет хостинг/сервер

Комплексный аудит ИМ. Формирование УТП, анализ юзабилити, каналов продвижения. Контекстная реклама, настройка систем аналитики. Консультация - бесплатно, в ЛС
[Удален]
#2
seo-nerpa:
С чем это может быть связано?

с настройками проги/сервера

SN
На сайте с 28.03.2017
Offline
50
seo-nerpa
#3

burunduk, значит надо задать крол делей для лягухи?

[Удален]
#4

seo-nerpa, там много чего можно задать и заодно посмотреть настройки сервера

видел сайты, которые на любой запрос не из браузера отдавали 503 (поисковикам отдаётся всё нормально)

+ сервер может просто падать от запросов

Google одинаково обрабатывает 429 Как сообщить поисковому роботу, Google: что делать, если

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий