Можно любой хедер подставлять, даже Чебурашку ..
Чебурашка - новый поисковик?
Это как?
И на гитхабе можно найти инструмент для отправки страниц собственного сайта на индекс.
Но поисковики (чаще всего яндекс судя по логам) пытается обратиться как сайт.рф/текст/текст/index.php что приводит к 404 ошибке
Как поисковикам запретить обращаться по такому пути?
Это не приводит к какой-то ошибке. Это название ответа - 404 ErrorИ это как раз тот ответ ( 404) который и должен отдавать сайт на несуществующие страницы
рекламу под персональные метрики - это я могу понять. а зачем каждому выдавать персональную поисковую выдачу - вообще понять не могу.
Вместо ворчания, лучше подумать, как попасть в быстрый ответ Яндекса.У меня в топе сайт конкурент, он красиво встал в быстром ответе.Мой сайтик идет вторым по запросу.А по позициям конкурент ниже.Завтра поковыряю тему.
1. Накрутка своего быстрого ответа)2. Сайт конкурент элементарно выбивается из ТОП1 быстрого ответаPS Точно также как и ваш если накрутите, и не "застолбите"
поздно дошло, если дошло.У всех давно приложения на мобилах и даже банковские карты этих маркетплейсов.Яндекс больше не актуален по огромному количеству товаров.
В точку, бабы живут в приложении озон и wb. Ну и тикток, который я никак не освою😂Яндекс со своей товарной выдачей, которую он пихает куда ни попадя, совсем не сдался
типа в робот текст запретить?
Открываете курс HTML, изучаете, находите второй вариант как проставить ссылку
Не получится, скрипты читаются, а robots.txt не правило, а рекомендации
Как прятать?
Не во всех, гугл то нормально показывает