если будет сразу и запрет и разрешение индексации?

Mik Foxi
На сайте с 02.03.2011
Offline
1213
712

Если сразу будет в мета тегах каша:

<meta name="robots" content="index,follow" />

<meta name="robots" content="noindex,follow" />

т.е. сначало разрешаем одним тегом, другим запрещаем.

будет такая страница индексироваться?

Антибот, антиспам, веб фаервол, защита от накрутки поведенческих: https://antibot.cloud/ (Зеркало: https://антибот.рф/ ) Форум на замену серчу: https://foxi.biz/
anser06
На сайте с 11.03.2006
Offline
292
#1

Не будет.

1) Вторая директива может "перебивать" первую.

2) Если директивы противоречат друг другу, поисковый бот может предпочесть страницу вообще не трогать. Например, недавно где-то читал, что если поисковый бот знает, что на сайте есть robots.txt, но получить к нему доступ не может, он предпочитает за лучшее не рисковать и не индексировать сайт.

Mik Foxi
На сайте с 02.03.2011
Offline
1213
#2

с роботсом наоборот (для гугла во всяком случае точно), если там нарушен синтаксис и т.п. то поисковик (гугл) вообще забивает на роботс и индексирует все подряд.

wolf
На сайте с 13.03.2001
Offline
1183
#3
foxi:
будет такая страница индексироваться?

Будет индексироваться:

Если робот обнаруживает конфликт между тегами, выбирается именно положительное значение.

http://help.yandex.ru/webmaster/?id=1127756

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
SW
На сайте с 26.04.2013
Offline
2
#4
foxi:
с роботсом наоборот (для гугла во всяком случае точно), если там нарушен синтаксис и т.п. то поисковик (гугл) вообще забивает на роботс и индексирует все подряд.

Все верно, если синтаксис нарушен - в файле ошибка => инструкции ошибочны => можно их не учитывать - забиваем на роботс.

mark3000
На сайте с 29.08.2009
Offline
115
#5

Я где то читал у яндекса, что в "спорных" случаях по умолчанию принимается положительное значение. Поэтому скорее всего запрета не будет.

LINKOSCOP 4.2 (http://www.interascope.biz/linkoscop-4/) это 100+ функций для работы с внутренней перелинковкой
SmileP
На сайте с 18.02.2010
Offline
386
#6
anser06:
он предпочитает за лучшее не рисковать и не индексировать сайт

Это не так.

Сами подумайте- одна ошибка в роботсе и сайт на всегда уходит из индекса?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий