что так как я заблочила роботов по строгим правилам, то новые уже не смогут приходить, трафик будет выдаваться по уже накопленным ботам. Это все прекрасно, но их с каждым днем их все больше и больше.
Заблокировать роботов по строгим правилам - под них попадают стандартные роботы, которые Яндекс знает Блокировать ботов Яндекс не умеет, так как это боты "с профилями яндекса", которые Яндекс индефицировать пока не может
вот применительно к этой проблеме я и дал свою рекомендацию. Она касается вопросов приоритетного индексирования. Не верите мне, почитайте практику использования данных настроек и станет понятно.
К вашей рекомендации, я вам задал конкретный вопрос, с кокрентным примером вашего сайта Какой last-modified отдаст ваш сайт на страницу /audit-sajtov?utm=avito ? Вы не ответили. Именно такие пачки, вебмастер и индексирует, независимо от того, что они запрещены в правилами robots.txt Отвечу за вас - ваша рекомендация не работает, потому что last-modified будет тот же что и для страницы /audit-sajtov
И думаю, и уверен, что все рекламные метки должны быть запрещены для обхода и индексирования через robots.txt директивой Сlean-param для Яндекса и можно настроить Disallow для Гугла. Индексироваться страницы с дополнительными параметрами от рекламных меток не должны.
Да, я вполне спокойно пишу😀 Думайте дальше, написал черным по белому - Яндекс игнорит robots.txt, если есть связка метрики и вебмастера. Данные метрики в приоритете. Он учитывает правила robots.txt, но позже.
Настройка ответов last-modified должна помочь. И корректное соблюдение lastmod у xml карты.
Как вы думаете, какой last-modified отдаст ваш сайт на страницу /audit-sajtov?utm=avito - то что эту страницу уже проиндексировал вебмастер, это к гадалке не ходи, потому что ответ сервера 200 - и естественно это дубль страницы. Я вам про метки писал, вы мне в ответ ересь, и типа что у вас все на мази.
Плевали они на вашу xml карту, robots ..., особенно если вебмастер связан с метрикой И, если переходов в метрике на страницу с параметрами будет больше, то основная страница станет недостаточно качественной
Приведенный адрес - это вариация адреса с рекламной utm меткой целевой страницы.
Читать не умеешь, писать умеешь, не анализируя прочитанное
PS Слышишь тольк себя😀
Сегодня в ватсап пришло
Реально. Вначале вы закажете, потом они конкурентам предложат, конкуренты у вас сольют бюджет
Оно вам надо? Итак в директе практически одни боты.
А потом - бесконечные мысли, что не так со мной... Оказывается, всё нормально. Просто скучно стало ему, а мне надо было действовать.
Вы, никогда не будете знать...как действовать.
А жизнь показывает, что даже если много совместного и много вместе, такое все равно случается
Поэтому просто живите, любите...пока вместе)) И никто никогда не знает сколько времени: год или всю жизнь
В наследство досталась птичка, говорящая голосом покойного супруга...
Вот так вылетит из головы (про птичку), так и шизануться недолго😀
Как сделать, чтобы в выдаче Гугла была не одна картинка с сайта, а несколько?
Точно также как у Яндекса при включенном турбо
roks-v #:
что так как я заблочила роботов по строгим правилам, то новые уже не смогут приходить, трафик будет выдаваться по уже накопленным ботам. Это все прекрасно, но их с каждым днем их все больше и больше.
Заблокировать роботов по строгим правилам - под них попадают стандартные роботы, которые Яндекс знает
Блокировать ботов Яндекс не умеет, так как это боты "с профилями яндекса", которые Яндекс индефицировать пока не может
вот применительно к этой проблеме я и дал свою рекомендацию. Она касается вопросов приоритетного индексирования. Не верите мне, почитайте практику использования данных настроек и станет понятно.
К вашей рекомендации, я вам задал конкретный вопрос, с кокрентным примером вашего сайта
Какой last-modified отдаст ваш сайт на страницу /audit-sajtov?utm=avito ? Вы не ответили.
Именно такие пачки, вебмастер и индексирует, независимо от того, что они запрещены в правилами robots.txt
Отвечу за вас - ваша рекомендация не работает, потому что last-modified будет тот же что и для страницы /audit-sajtov
И думаю, и уверен, что все рекламные метки должны быть запрещены для обхода и индексирования через robots.txt директивой Сlean-param для Яндекса и можно настроить Disallow для Гугла. Индексироваться страницы с дополнительными параметрами от рекламных меток не должны.
Да, я вполне спокойно пишу😀
Думайте дальше, написал черным по белому - Яндекс игнорит robots.txt, если есть связка метрики и вебмастера.
Данные метрики в приоритете. Он учитывает правила robots.txt, но позже.
даже не думает об этом - просто как будто забыл про пару десятков тысячь страниц удаленных, я на сайте оставил 1к всего и жду второй месяц деиндекса
Плюнул на 404, заменил на 301, он их достаточно быстро обрабатывает
Настройка ответов last-modified должна помочь. И корректное соблюдение lastmod у xml карты.
Как вы думаете, какой last-modified отдаст ваш сайт на страницу /audit-sajtov?utm=avito
- то что эту страницу уже проиндексировал вебмастер, это к гадалке не ходи, потому что ответ сервера 200
- и естественно это дубль страницы.
Я вам про метки писал, вы мне в ответ ересь, и типа что у вас все на мази.
Плевали они на вашу xml карту, robots ..., особенно если вебмастер связан с метрикой
И, если переходов в метрике на страницу с параметрами будет больше, то основная страница станет недостаточно качественной