Что нужно сделать чтобы запретить Гуглу и Яндексу индексировать постраничную навигацию?

В статье написано, что тег каноникал не будет срабатывать, если он неправильно настроен или же если каноническая страница недоступна. По-моему, это и так очевидно. Вот только непонятно, почему вы считаете, что страница должна быть недоступна? Если случился технический сбой, то и дубль будет недоступен. А вообще, если такое и произошло, робот зайдет в следующий раз и добавит в индекс уже каноническую страницу.

Далеко не всегда, только если страница была недоступна в тот момент, когда и робота на ней не было. Если робот зарегистрировал ошибку у себя, то она появится в панели вебмастера.

только там есть пояснение что такое неправильно - разный контент ;)

а вы так уверенны что всё обходится за один раз?

ну если у вас на сайте 10 страниц, то да за один раз обойдёт, а если много очень много?

Свою корону и пафос затолкай поглубже в промежность!

Обсуждать можно хоть сотни раз, а правильного ответа так и не найти.

Уже четвертая страница споров, и никакой конкретики.

С наступающим Днем Знаний.

Ответ на вопрос я нашел. Зря только тему создавал.

Обязательно отыщется особь, которая вместо подсказки начнет плодить бесполезные советы.

Тему можно закрывать. Каюсь, что и открывать ее тоже не стоило.

---------- Добавлено 30.08.2017 в 18:22 ----------

Здравствуйте, Дмитрий!

Страницы запрещены при помощи мета-тега noindex, поэтому в поиске они участвовать не будут, не переживайте.

Более подробную информацию о методах управления роботом Вы можете прочитать на странице нашей Помощи.

Только что получил ответ.

И Вы довольны тем, что инфы с этих страниц не будет в поиске? А может быть, и сайт Вам не нужен? Чтобы уж совсем не переживать?

Там анонсы публикаций- частичные дубли. В правой колонке сайта список разделов и свежие записи. Сквозные блоки, которые присутствуют на всех страницах.

Какого контента я лишаюсь, объясните?

Роботу не запрещено переходить по внутренним ссылкам этих страниц.

Я применил схему с сайта Ктонановенького. Надеюсь, что никто не осмелиться спорить, что это один из самых посещаемых ресурсов профильной тематики.

Когда не был скрыт счетчик Яндекс.Метрики, суточная посещаемость составляла 32000-34000 душ. Или как там у Вас, у профессионалов, это называется.

Дмитрию Иванецку, видимо, тоже сайт на хрен не нужен.

Ему и так с лихвой денег хватает.

Вчитался более внимательно: ничего в утвердительной форме не сказано, типа в стиле "может робот будет считать каноникал ошибочным, а может и не будет". ПС никогда не раскрывает алгоритм работы. В той статье сказано, что робот в принципе может отличать, когда вебмастер ошибся и, например, на всех страницах добавил каноническую главную страницу сайта.

К примеру, у меня на сайте точно контент отличается между "дублем" и каноническими, но тайтл одинаковый, и роботы индексируют как мне надо.

А зачем всё за один раз? Мы говорили о внешней ссылке на дубль, так вот робот зайдет на дубль и увидит каноническую страницу и перейдет на нее.

вот это и есть самое "интересное" - свобода выбора, её как раз и надо лишать!!! ;)

вы видимо не совсем понимаете как это всё работает

бот проходит по заранее определённому списку url и ни чего не анализирует "на лету" , канонической страницы просто может не быть в этом пуле :)