Глюк Яндекса или мой?!

Если Вы закрыли разделы в которых находятся статьи, эти статьи тоже не будут индексироваться.

Наличие на сайте sitemap не готовит яндексу о том, что надо а что не надо индексировать.

Если Вы хотите что бы некоторые статьи из раздела индексировались пропишите их в robots.txt для индексации.

Я закрыл разделы, а не статьи.

К примеру, раздел Disallow: /article/ - http://site.ru/article/ в себе содержит статью http://site.ru/122-privet.html В url статьи нет частицы "/article/" - соответственно статья не запрещена.

Гугл страницы хавает нормально, яндекс выплевывает.

лучше оставьте ссылку на сайт. проще посмотреть, чем гадать

Как-то оставлял ссылку на один старый проект, так весь контент растащили 🙅

А, спасибо, чуть не попался. Тоже есть один сайт, контент точно уникальный, но яндекс его забанил и не хочет выводить из бана, так как сайт обновляется очень редко и не регулярно, раз 2-6 недель. Буду переводить на другой домен.

Яндекс за это не банит

Месяц - не срок для Яндекса. Он тугодум.

На Google ссылаться некорректно - он мужик простой, часто и не

такие ошибки прощает, но шустрый.

Стоит все же проверить в роботсе (хотя поисковикам это похоже

и не помеха) и на сайте, как все закрывалось. Хоть одна, по моему

мнению, но лазейка к страницам должна остаться. Либо через разделы,

либо через постраничку, иначе боту и идти будет некуда - теги закрыты,

разделы закрыты, постраничка закрыта. Как добираться до статьи.

+1.

ТС, робот впервые заходит на сайт, видит там вашу страницу /articles/, которая закрыта от индексации, и радостно "уходит" от неё, т.к. его туда не пускают.

Робот будет индексировать все ваши статьи, если найдет на них ссылки с других страниц, которые для него открыты. Хотите, чтобы все индексировалось - разрешите в роботсе раздел /articles/, сделайте html-карту сайта, на которую поставьте ссылку с главной. Варианты есть.

Я на прошлой неделе сайт один видела тоже на DLE. На сайте почти 80 страниц, в индексе - только 6. Проблема была подобного плана как здесь описано.

На сайте есть главная, несколько статичных страниц и еще 4 страницы - рубрики каталога. С этих 4 страниц идет больше 70 ссылок на карточки товаров. И вот эти 4 страницы-рубрики корректно отображаются для пользователя, но сервер по ним отдает 404-й ответ.

В итоге робот не индексируют не их, ни карточки товаров.

Данные по количеству проиндексированных страниц из Яндекс.Вебмастера? А сколько там загруженных роботом страниц?

Абсолютно согласен с SeoMad, если хотите чтобы индексировались статьи - откройте раздел (кстати что Вам мешает в этом разделе дублирующие анонсы закрыть в noindex?), иначе робот просто не попадет туда. Или же создавайте html карту сайта с ссылками на страницы которые вы хотите проиндексировать.