- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Доброго дня
Есть категория
/cat1/cat2/cat3
внутри категории карточки товаров, у которых указан бренд, являющийся ссылкой /brands/brand1
яндекс упорно пытается просканировать выдуманный им же адрес /cat1/cat2/cat3/brands/brand1
Почему так может происходить? Ссылки все относительные от корня. Воспроизвести получение такого урла руками никак не получилось.
robots.txt давно проверяли? релканоникал ?
robots.txt давно проверяли? релканоникал ?
как каноникал может влиять на урлы?
указан https://site.ru/cat1/cat2/cat3
в роботсе только несколько запрещенных папок, больше ничего
Почему так может происходить?
Потому что бот тянет все урлы, которые создаются кем угодно, а их создают говноботы и всякое отребье. Раньше можно было отключить в метрике, теперь нет. Если каноникал настроен, пусть себе чекает на здоровье, на выдаче это не должно отразиться.
Charli, гарантированно ошибка на вашей стороне, запустите сканирование сайта любым нормальным парсером
Вспомнил, что такие ошибочные урлы были, но было это очень давно, месяцев 7-8 назад. И эти страницы не отдавали 404ю ошибку, а грузилась пустая категория просто. 404ю недавно для таких страниц настроили.
Возможно что из-за этого так долго он пытается стучать?
Возможно что из-за этого так долго он пытается стучать?
он всё время будет туда ломиться, просто чем дольше там будет 404 тем реже он будет это делать
он всё время будет туда ломиться, просто чем дольше там будет 404 тем реже он будет это делать
Иногда проще настроить редирект )) у меня и через 2 - 3 - 5 лет ломились на 404. 🤪
Иногда проще настроить редирект )) у меня и через 2 - 3 - 5 лет ломились на 404. 🤪
а это уже другой философский вопрос ))
Что лучше, 404 или редирект на нужную категорию?