Запретить сканирование как ?

JJwar · 2026-02-13T14:19:35.0000000Z

Добрый день. Сайт https://starvell.com/ С сайтом такая проблема - очень много на сайте "технических" страниц, типа: https://starvell.com/users/17538 https://starvell.com/offers/12791 https://starvell.com/chat/01994256-a4bc-9836-7101-f8be85343cee https://starvell.com/order/0199abd3-1aa5-e26c-712c-9e7240454da3 Подобных технических страниц - несколько десятков тысяч, более полусотни, то есть, огромное количество. Я еще помню те времена, когда за подобное - поисковики жёстко банили сайты, с формулировкой "Сайт создаёт излишнюю нагрузку на сервера поисковой системы". Сейчас поисковики не банят сайт, но и траста сайту подобная проблема явно не добавляет. Удалить все эти страницы - нет возможности, сайт не сможет функционировать без них. ВОПРОС: есть ли какой то способ запретить поисковику СКАНИРОВАТЬ весь подобный "технический" мусор ? Запреты в текстовом роботсе, метароботсе, отдача 404 ответа - всё это не срабатывает, поисковый бот всё равно СКАНИРУЕТ весь этот массив страниц. Может с помощью директивы Clean-param как то можно запретить СКАНИРОВАНИЕ всех этих страниц? Может есть какой то другой способ?

2074

Vladimir SEO

18 февраля 2026, 12:29

#31

JJwar #:
С сайтом работают профессиональные программисты, какое задание им поставить ? Удалить все учётки пользователей? А как сайт будет функционировать без возможности зарегистрироваться на нём ?

это можно реализовать без урлов )

Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/

624

Vladimir

18 февраля 2026, 15:13

#32

Vladimir SEO #:
это можно реализовать без урлов )

👍

Аэройога ( https://vk.com/aeroyogadom ) Йога в гамаках ( https://vk.com/aero_yoga ) Аэройога обучение ( https://aeroyoga.ru ) и просто фото ( https://weandworld.com )

155

Mazay

18 февраля 2026, 15:48

#33

JJwar #:
С сайтом работают профессиональные программисты, какое задание им поставить ? Удалить все учётки пользователей? А как сайт будет функционировать без возможности зарегистрироваться на нём ?

Убрать обход по Метрике. Так как в данном случае он вреден. И заблокировать ненужное в robots. Как это и рекомендует яндекс. Мусорные страницы будут иногда проверяться ПС на предмет наличия какой-нибудь чернухи. Это не столь вредно, как то что сайт сделан на скриптах. Скриптованные сайты не особо перспективны для сео.

Яндекс напомнил о возможности Google: блокировка страницы в Интеграция Вебмастера и Метрики

В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах

Зачем быть уникальным в мире, где все можно скопировать