- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Что делать, если ваша email-рассылка попала в спам
10 распространенных причин и решений
Екатерина Ткаченко
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Привет,
подскажите пожалуйста, если страница запрещена к индексации, робот гугла полностью игнорирует ее или может переходить по ссылкам на данной странице и индексировать страницы по этим ссылкам, которые не запрещены?
Если кратко:
Есть интернет-магазин. В нем каталог. Запретил к индексации страницы вида: Каталог (страница 2), Каталог (страница 3) итд. Но хотелось бы, что по страницам товаров робот гугла прыгал
Привет,
подскажите пожалуйста, если страница запрещена к индексации, робот гугла полностью игнорирует ее или может переходить по ссылкам на данной странице и индексировать страницы по этим ссылкам, которые не запрещены?
Если кратко:
Есть интернет-магазин. В нем каталог. Запретил к индексации страницы вида: Каталог (страница 2), Каталог (страница 3) итд. Но хотелось бы, что по страницам товаров робот гугла прыгал
Вы запретили индексацию
подскажите пожалуйста, если страница запрещена к индексации, робот гугла полностью игнорирует
Нет, ваш запрет индексации - это лишь рекомендация.
По своему усмотрению Гугл может и обходить страницу, и в особых случаях даже индексировать. А потом в Консоли вывести уведомление, что проиндексировано несмотря на запрет индексации.
Запретил к индексации страницы вида: Каталог (страница 2), Каталог (страница 3) итд. Но хотелось бы, что по страницам товаров робот гугла прыгал
Запрещайте индексацию и на уровне robots.txt, и на уровне документа (в мета) (если страница попадает в поиск несмотря на запрет в robots.txt).
Также есть вариант запрета через http заголовок, инструкция X-Robots-Tag.
Запрещайте индексацию и на уровне robots.txt, и на уровне документа (в мета) (если страница попадает в поиск несмотря на запрет в robots.txt).
Так ведь не работает. Он может проиндексировать ту что закрыта в роботс. Если на ней еще и ноуиндекс, то он его просто не увидит.
<meta name="robots" content="noindex,nofollow" />Ну и в robots.txt закрываем
подскажите пожалуйста, если страница запрещена к индексации, робот гугла полностью игнорирует ее или может переходить по ссылкам на данной странице и индексировать страницы по этим ссылкам, которые не запрещены?
Бот Гугла ходит по страницам, которые запрещены к индексации (это в логах видно). Бот Гугла может даже проиндексировать страницы, которые вы в роботс.тхт закрыли от индексации. Бот Гугла вообще себя на разных сайтах по-разному может вести в силу разных причин. Вы просто выгрузите логи вашего сайта и посмотрите, бегает ли бот на страницы раздела, который вы закрыли от индексации. Скорее всего бегает, но гораздо реже, чем на те страницы, на которые прёт трафик из поиска.
<meta name="robots" content="noindex,nofollow" />
Тогда уж noindex,follow, ТС ведь хочет, чтобы бот продолжал бегать.
Тогда уж noindex,follow, ТС ведь хочет, чтобы бот продолжал бегать.
Сорян, не дочитал.
Тогда в robots запрещать не стоит.
Но если стоит noindex, то робот редко такие страницы обходит.
Уважаемые доны, подскажите пожалуйста еще вот по такому вопросу: страницы успешно заблочились для индексации, а нужно ли теперь что-то делать с вот такими оповещениями в консоли вебмастера?
если страница запрещена к индексации, робот гугла полностью игнорирует ее или может переходить по ссылкам на данной странице и индексировать страницы по этим ссылкам, которые не запрещены?
если запрет к индексу мета ноиндекс - то индекса не будет, если ноиндекс фоллоу будет дальше ходить, но со временем частота захода упадет.
не путаем с роботс тхт - это вообще рекоменда к саникрованию, а не индексации. И там если есть трафик то гугл нынче может спокойно лазить и индексить
если запрет к индексу мета ноиндекс - то индекса не будет, если ноиндекс фоллоу будет дальше ходить, но со временем частота захода упадет.
не путаем с роботс тхт - это вообще рекоменда к саникрованию, а не индексации. И там если есть трафик то гугл нынче может спокойно лазить и индексить
Благодарю, а по комменту выше с панелью вебмастера подскажете пожалуйста? Также интересует, что делать с Validate fix например на страницах 404 (если страницы удалили и восстанавливать не планируется - нажимать ли validate fix)
нажимать ли validate fix)