Что нужно сделать чтобы запретить Гуглу и Яндексу индексировать постраничную навигацию?

1 234
dotern
На сайте с 21.09.2016
Offline
107
#31
burunduk:
ещё раз, только при условии доступности страницы

P.S. http://www.thesempost.com/google-ignores-canonicals-implemented-error/

В статье написано, что тег каноникал не будет срабатывать, если он неправильно настроен или же если каноническая страница недоступна. По-моему, это и так очевидно. Вот только непонятно, почему вы считаете, что страница должна быть недоступна? Если случился технический сбой, то и дубль будет недоступен. А вообще, если такое и произошло, робот зайдет в следующий раз и добавит в индекс уже каноническую страницу.

burunduk:

да, но далеко не всегда

Далеко не всегда, только если страница была недоступна в тот момент, когда и робота на ней не было. Если робот зарегистрировал ошибку у себя, то она появится в панели вебмастера.

[Удален]
#32
dotern:
если он неправильно настроен

только там есть пояснение что такое неправильно - разный контент ;)

dotern:
Если случился технический сбой, то и дубль будет недоступен

а вы так уверенны что всё обходится за один раз?

ну если у вас на сайте 10 страниц, то да за один раз обойдёт, а если много очень много?

[Удален]
#33
totamon:
На "нашем форуме" это обсуждалось сотни раз, пользуйтесь поиском, или придумывайте новые, уникальные фобии, старые никому не интересны уже.

Свою корону и пафос затолкай поглубже в промежность!

Обсуждать можно хоть сотни раз, а правильного ответа так и не найти.

Уже четвертая страница споров, и никакой конкретики.

С наступающим Днем Знаний.

Ответ на вопрос я нашел. Зря только тему создавал.

Обязательно отыщется особь, которая вместо подсказки начнет плодить бесполезные советы.

Тему можно закрывать. Каюсь, что и открывать ее тоже не стоило.

---------- Добавлено 30.08.2017 в 18:22 ----------

Здравствуйте, Дмитрий!

Страницы запрещены при помощи мета-тега noindex, поэтому в поиске они участвовать не будут, не переживайте.

Более подробную информацию о методах управления роботом Вы можете прочитать на странице нашей Помощи.

Только что получил ответ.

S
На сайте с 30.09.2016
Offline
469
#34
Дмитрий2017:
Страницы запрещены при помощи мета-тега noindex, поэтому в поиске они участвовать не будут, не переживайте.

И Вы довольны тем, что инфы с этих страниц не будет в поиске? А может быть, и сайт Вам не нужен? Чтобы уж совсем не переживать?

Отпилю лишнее, прикручу нужное, выправлю кривое. Вытравлю вредителей.
[Удален]
#35
Sitealert:
И Вы довольны тем, что инфы с этих страниц не будет в поиске? А может быть, и сайт Вам не нужен? Чтобы уж совсем не переживать?

Там анонсы публикаций- частичные дубли. В правой колонке сайта список разделов и свежие записи. Сквозные блоки, которые присутствуют на всех страницах.

Какого контента я лишаюсь, объясните?

Роботу не запрещено переходить по внутренним ссылкам этих страниц.

Я применил схему с сайта Ктонановенького. Надеюсь, что никто не осмелиться спорить, что это один из самых посещаемых ресурсов профильной тематики.

Когда не был скрыт счетчик Яндекс.Метрики, суточная посещаемость составляла 32000-34000 душ. Или как там у Вас, у профессионалов, это называется.

Дмитрию Иванецку, видимо, тоже сайт на хрен не нужен.

Ему и так с лихвой денег хватает.

dotern
На сайте с 21.09.2016
Offline
107
#36
burunduk:
только там есть пояснение что такое неправильно - разный контент ;)

Вчитался более внимательно: ничего в утвердительной форме не сказано, типа в стиле "может робот будет считать каноникал ошибочным, а может и не будет". ПС никогда не раскрывает алгоритм работы. В той статье сказано, что робот в принципе может отличать, когда вебмастер ошибся и, например, на всех страницах добавил каноническую главную страницу сайта.

К примеру, у меня на сайте точно контент отличается между "дублем" и каноническими, но тайтл одинаковый, и роботы индексируют как мне надо.

burunduk:

а вы так уверенны что всё обходится за один раз?
ну если у вас на сайте 10 страниц, то да за один раз обойдёт, а если много очень много?

А зачем всё за один раз? Мы говорили о внешней ссылке на дубль, так вот робот зайдет на дубль и увидит каноническую страницу и перейдет на нее.

[Удален]
#37
dotern:
Вчитался более внимательно: ничего в утвердительной форме не сказано, типа в стиле "может робот будет считать каноникал ошибочным, а может и не будет". ПС никогда не раскрывает алгоритм работы.

вот это и есть самое "интересное" - свобода выбора, её как раз и надо лишать!!! ;)

dotern:
А зачем всё за один раз? Мы говорили о внешней ссылке на дубль, так вот робот зайдет на дубль и увидит каноническую страницу и перейдет на нее.

вы видимо не совсем понимаете как это всё работает

бот проходит по заранее определённому списку url и ни чего не анализирует "на лету" , канонической страницы просто может не быть в этом пуле :)

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий