парсинг

D

55

dimakorenew

10 августа 2019, 14:08

486

не могу с помощью seo grog-а спарсить сайт - https://www.culture.ru

дольше первой страницы не идёт

есть с помощью карты сайта - то не выгружает данные (title, description и т. д.)

Поисковому роботу отдаёт корректно страницы, проблем с индексацией нет

запрета на парсинг не стоит

С frog'оm проблем нет, другие сайты парсит

в чём причина тогда?

231

Lazy Badger

10 августа 2019, 16:39

#1

dimakorenew:
не могу с помощью seo grog-а спарсить сайт

SA тоже дальше главной не идет, но за такие страницы вообще надо не отказ в обслуживании выкатывать, а пороть на конюшне

Производство жести методом непрерывного отжига

D

55

dimakorenew

10 августа 2019, 16:51

#2

LazyBadger:
SA тоже дальше главной не идет, но за такие страницы вообще надо не отказ в обслуживании выкатывать, а пороть на конюшне

с хостингом проблема?