Если страница редиректится, значит редирект есть. Ищите, где он прописан.
Ну и не забывайте сбрасывать кэш везде, где только можно.
Может быть, как к "дору"? ;)
Попробуйте самостоятельно ответить на вопрос: что могло одновременно отпугнуть всех роботов, при условии, что люди проблем не заметили?
Короче, надо смотреть на сайт глазами робота.
Ну не везде же должен быть карась!
По какой причине прогнал?
Тут нет гарантий, поэтому лучше их нагенерировать от греха подальше.
robots.txt ещё кое-как работает.
А вот в действенность noindex+nofollow я не верю.
Каждому производителю придётся писать письмо и просить разрешение хоть в каком-то виде. Некоторые разрешают, некоторые вообще рекомендуют использовать фото и с их сайта.
Мне вот интересно, можно ли планировать влить такую "небольшую" сумму в дата-центр, если он располагается в арендованном помещении!? Предположим, через 3 года хозяин помещения решается повысить цену, или просто отдаёт помещение в аренду другим людям под суши-бар.... и что!? Ну, предположим, за пару дней всё оборудование можно вывезти (но куда?), однако что делать с коммуникациями?
Схема имеет смысл, если вышеуказанные сайты являются трастовыми с т.з. поисковых машин.
А если это обычные хилые сайты, то ссылки повредят в обе стороны.
Скрыть индексацию ссылки можно только через скрипты, а на noindex я бы не стал опираться.
