Как понимать такое?

ну может сам код с определенной натяжкой можно считать несколько переоптимизированным

Дк, ты нагенерил кучу страниц и считаешь, что это типа, всё ок и они будут жить вечно в индексе? Твой сайт забанен, судя по симптомам, описанным тобой.

Да при чем тут нагенерил! Это страницы с _контентом_ просто их очень много.

А ситуация получила такое развитие - в этот день, когда сайт был полностью вырезан, я посмотрел все датацентры - сайта не было ни в одном. Надо ли говорить как меня это убило, тем более абсолютно непонятно _за что_.

На следующий день сайт появился _во всех_ датацентрах с тем же, если не с большим количеством проиндексированных страниц.

А сегодня он примерно в половине есть, а в остальной опять нет.

Кто-нибудь сталкивался с таким?

И эта ситуация, и та, о которой говорилось изначально вполне нормальны - обычные последствия танца. Как правило за пару дней все стает на свои места. Такие вопросы тут обсуждались уже сотни раз.