Screaming Frog не парсит сайт

N
На сайте с 14.10.2023
Offline
0
2497

Добрый день, SF парсит только одну, главную, страницу сайта, что-то там пишет... помогите разобраться пожалуйста. Другие сайты парсит нормально. У моего какая-то проблема по ходу.

Вот урл https://avtozapchasti.biz.ua/

Заранее спасибо.

Антоний Казанский
На сайте с 12.04.2007
Online
702
#1
noobestseo :
У моего какая-то проблема
√ SEO продвижение ► https://akazansky.ru - экспертный аудит сайтов ( https://akazansky.ru/audit-sajtov ), внедрение эффективных решений цифрового маркетинга.
N
На сайте с 14.10.2023
Offline
0
#2

Добрый вечер. Спасибо! Подскажите, как убрать эту проблему? Это должен убрать программист?
Я извиняюсь за такие простенькие вопросы, я не разбираюсь вообще :)

Антоний Казанский
На сайте с 12.04.2007
Online
702
#3
noobestseo #:
Добрый вечер. Спасибо!

Добрый вечер, пожалуйста.


noobestseo #:
Подскажите, как убрать эту проблему?

Можно в настройках программы SF указать, чтобы программа следовала по страницам с noindex.

В Меню -> Configuration -> Crawl Config

вот здесь ставите галочку,

Либо снять со страниц запрет индексации в meta robots.

N
На сайте с 14.10.2023
Offline
0
#4
Антоний Казанский #:

Добрый вечер, пожалуйста.


Можно в настройках программы SF указать, чтобы программа следовала по страницам с noindex.

В Меню -> Configuration -> Crawl Config

вот здесь ставите галочку,

Либо снять со страниц запрет индексации в meta robots.

Спасибо. Дело в том, что я ставлю там галочку, но это не имеет никакого эффекта.

Антоний Казанский
На сайте с 12.04.2007
Online
702
#5
noobestseo #:
Дело в том, что я ставлю там галочку, но это не имеет никакого эффекта.

Сделайте ещё ряд доп. настроек,

И процесс пойдет,


N
На сайте с 14.10.2023
Offline
0
#6
Антоний Казанский #:

Сделайте ещё ряд доп. настроек,

И процесс пойдет,


Заработало! Анатолий, спасибо вам огромное!! :) Желаю вам побольше "жирных" клиентов :) всего доброго!

Антоний Казанский
На сайте с 12.04.2007
Online
702
#7
noobestseo #:
Заработало!

Я рад 😊


noobestseo #:
Анатолий, спасибо вам огромное!! :)

Пожалуйста, только я не Анатолий, я - Антоний.


noobestseo #:
Желаю вам побольше "жирных" клиентов :) всего доброго!

Всех благ! 😉 

N
На сайте с 14.10.2023
Offline
0
#8
Антоний Казанский #:

Я рад 😊


Пожалуйста, только я не Анатолий, я - Антоний.


Всех благ! 😉 

Ой, извините Антоний) спасибо за помощь!

Dmitry
На сайте с 29.03.2020
Offline
32
#9

У меня такая же проблема, почти. 

Не парсит сайт и пишет: Connection Refused и это версии 19.

Если ставлю версию 18, то там норм. 

@ Антоний Казанский выручай 

Антоний Казанский - anthony_ - Профиль вебмастера - Форум об интернет-маркетинге
Антоний Казанский - anthony_ - Профиль вебмастера - Форум об интернет-маркетинге
  • 2023.10.12
  • searchengines.guru
Антоний Казанский - anthony_ - Профиль вебмастера

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий