- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Коллеги, привет!
Помогите пожалуйста.
Дано: интернет-магазин. Вылезла ошибка по краулеру , что на некоторые страницы сайта, не указывает ни одна внутренняя ссылка, таких порядка 1500 страниц.
Смотрю эти ссылки - это обычные карточки товара, находятся на сайте. На листинге они есть, т.е. доступ к ним тоже есть. Активные, индексируются, в карте сайта есть, не заблочены никак.
Не понимаю откуда надо начать смотреть, чтобы решить проблему или это вовсе не проблема и это какая-то ошибка? Из-за чего может быть эта ошибка?
Вылезла ошибка по краулеру
Вылезла ошибка по краулеру
А чё за чудо-краулер используете?
А чё за чудо-краулер используете?
SE Ranking - бывает показывает фигню, но в целом норм.
SE Ranking - бывает показывает фигню, но в целом норм.
Не понимаю откуда надо начать смотреть
Начинать смотреть надо с правил обхода краулером сайта (они могут игнорировать некоторые данные), например, учитывать/не учитывать nofollow, noindex, а также правила robots.txt
чтобы решить проблему
Используйте альтернативные краулеры (и сравните данные).
это вовсе не проблема и это какая-то ошибка
Это может быть всего лишь частным случаем проверки краулера, которые также не всегда корректны.
это обычные карточки товара, находятся на сайте
Проверьте данные карточки, нет ли у них запрета на индексацию в мета тегах и не попадают ли они в правила Disallow в robots.txt
Если в листингах категорий есть запреты на индексацию и переобход страниц пагинации, проблемные товары выводятся только там, то ссылки из перечней пагинаций могут игнорироваться и таким образом краулер не видит рабочих ссылок на часть ваших товаров.