- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте.
В robots.txt стоит запрет на индексацию большинства динамических ссылок,
например начинающихся с параметра "sort=":
User-agent: *
Disallow: /?sort=
Яндекс всеравно индексирует такие страницы. Например при попытке удаления проиндексированной страницы "/catalog/?sort=name&desc=0", яндекс говорит что страница не запрещена индексации.
Посмотрел, в ozon.ru например запрет на идексацию ссылок содержащих данные фильтра, установлен в мета-тэге роботс.
Как запретить для индексации страницы начинающиеся с "/?sort=" при помощи robots.txt?
Или только остается: <META name="ROBOTS" content="NOINDEX, NOFOLLOW">
Либо правильно будет делать (только что подумал)?
User-agent: *
Disallow: /catalog/?sort=
Либо правильно будет делать (только что подумал)?
User-agent: *
Disallow: /catalog/?sort=
Да.
d1ma, спасибо.
Я 2 недели не мог с этим разобраться, а когда написал сообщение на форум, вдруг увидел в чем косяк.
Перечитав вот эти слова: 'например начинающихся с параметра "sort="', я и увидел ошибку.
Либо правильно будет делать (только что подумал)?
User-agent: *
Disallow: /catalog/?sort=
Именно так. Если URL'ы имеют вид http://www.site.ru/catalog/?sort=blabla
Yaroslav_Adv, спасибо. Да как раз такой вид и имеют.
Ну 2 недели я этого непонимал, зациклелся на том, что главное указать тот парамтер с которого начинается.
Гриша К., бывает, ничего :) Если будут еще вопросы по robots.txt - идите на http://robotstxt.org.ru/
а кстати довольно часто, начинаешь объяснять, какая проблема и находишь косяк сам. видимо при преобразовании мыслей в слова другие участки мозга подключаются.
я иногда жену гружу :)