а можно узнать почему сначала redirect идет , а потом 403 и что это такое и с чем его вообще едят nginx, де можно поподробнее почитать и т.д.
так вы можете вообще не читать эту страницу, вас никто не заставляет
роботс приложила потому что стоит запрет сканированию ботам
т.е.
User-agent: bingbot
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: *openstat=
Disallow: *yclid=
Disallow: *gclid=
Disallow: *utm_campaign=
Disallow: *utm_source=
Disallow: *utm_medium=
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
Crawl-delay: 10---------- Добавлено 06.02.2020 в 12:59 ----------
http://www.ufa-opalubka.ru/
спасибо мил человек, и Вам желаю доброго пути
Puls-cen - портал , программисты странные - не особо идут на диалоги. отговорки - что сайт закрыт от парсинга конкурентов товаров
Хочу по факту им сказать что не так, чтобы чисто на нашем сайте это изменили---------- Добавлено 06.02.2020 в 12:26 ----------
смотрите в сеофрог что задать? или в мегаиндекс? или сайтрепорт? или в Proomopult парсинг метатегов???
дайте совет конкретный, пожалуйста.---------- Добавлено 06.02.2020 в 12:27 ----------
на примере моего сайта что там должно выйти???
да какие загадки
вот сайт
www.ufa-opalubka.ru
сам по себе открыт
но при любой программе сео не дает ничего парсить
проблема в роботс? или еще в чем?
в чем именно? можете точно подсказать?
не поняла, по ссылке идет просто анализ роботс - а где именно "собака зарыта" чтобы указать программистам что изменить -не могу понять.
да, открывается сайт.
Да хоть корень Имбиря готова приложить - объясните где кроется запрет
естественная ссылка с анкором это
1. масло форд купить на сайте www.site.ru
2. www.site.ru
