Проблемы индексации больших новых сайтов

дерьмо вонючее от яндексоидов, которое не работает

я больше месяца подавал на индексацию в Янд через index Now , нихрена они не индексируют

делайте всесторонние sitemaps. они хоть в поганом Янде работают

Яндекс же у себя в справке пишет, что это просто инструмент для того чтобы сообщить об изменениях на сайте, включая новые страницы. Даже примечание есть, что индексация того, что отправлено не гарантируется.

Если ты шлак яндексу отправляешь, то почему яндекс это должен индексировать?

Ну по мима индекса и дубля тут же еще поисковик дает коммерческие решения для ИМ, а это не в дублях измеряется.

А оставить XML карты на разделы можно и закрыть в роботсе? Делал так?

Это понятно, но в конкурентных топах ИМ-ов всегда больше, чем мест в зоне кликабельности серпа, поэтому те, что уже есть конкурируют, а те, что новые народились - ещё не факт, что для серпа нужны, вот и отпиночивает Яндекс в МПК те массы страниц, которые научились подсовывать ему для индексации.

Для занимательности выводов - поднимите историю индексации avito и посмотрите сколько было в индексе и сколько сейчас.

Лучше сделать связку для правил вывода url-ов с мета robots. Т.е. если адрес в noindex, nofollow,  значит данный адрес в sitemap xml не формируем. Ставим index, follow - "зелёный свет" для добавления в xml карту + обновление <lastmod>. 

Открыли новую порцию адресов, обновили мету, сформировали xml карту, актуализировали <lastmod> и вперед на переиндексацию, чтобы робот точечно пошёл по открытым для индексации адресам.

Ведь такой же проблемы еще пару лет назад не было....  Хотя  были промежутки когда я так много не загружал в каталоги. Ну года 3 назад точно не было.

Да... всё течет, всё изменяется. А мы как оптимизаторы подстраиваемся и адаптируемся под новые требования.

Как обычно. Уже и с наполнением сайта по точкам входа зарубили лазейку халявную) Ну задалбали...

А шляпу indexnow пробовал для решения этой проблемы?