Мусорные ключи в Гугле Вебмастере (тест)

Есть мысли откуда гугл их цепляет?

Исключительно косяки гугла. Весь топ-200 ради интереса перешерстил, не выскакивают эти страницы по таким ключам. Какое то несовершество в консоли.

А еще, если посматривать в Аналитику, то периодически вижу, что вот прямо сейчас у пользователя открыта страница, к примеру, site.com/5465645464845.html При том, что такой страницы на сайте нет. При попытке зайти на нее получаю 404, что правильно. И это не на одном сайте замечено. Цифры бывают разные, разумеется. Думал, что сайт взломали и залили булочные изделия, но их реально нет. Такая штука замечена мною на сайтах, где более 1к посетителей в сутки.

Или в самом поисковике.

Заглянул в лог сервера и посмотрел куда ходит гугл бот. Оказывается он лазит по страницам, которые давным давно удалены (в кеше поисковика уже новые версии), и идёт глубже. Т.е. сканит скрипты библиотек и файлов js страниц которых уже нет (ни страниц, ни скриптов).

Или вот ещё забавно. Гугл консоль указала открыть страницы для индексации и поставить на них тег ноуфолоу. Сделал как просит. В итоге, запрещённые страницы всё равно регулярно обходятся, и даже чаще чем те, на которые есть ссылка с морды.

Т.е. на "мусорные" страницы тратит краулерный бюджет (хотя я ему прямо сказал этого не делать), а на нормальные страницы сайта забивает.

Для чего гугл так себя ведёт?

Потому что ему так хочется - вот и все. Они не парятся с настройкой. У меня тоже noindex регулярно переобходится. Я из-за этого Google по IP забанил на тестовом сайте, чтобы не лез куда не просят 🚬

Есть копии на всех таких страницах.

Может страницу стянули на дор, вместе с счетчиком?

Закиньте страничку на переиндексацию и последите что будет.

---------- Добавлено 25.02.2020 в 14:46 ----------

Вполне возможно.

Просто вы не в теме, а рынок стаканов для "кофе с собой" очень развит... Производная от английского "coffee to go"

Я об этом не думал... Может, меня вообще проксируют... Нужно проверить. Благодарю за предположение!