Google Webmaster и robots.txt

L
На сайте с 11.08.2010
Offline
38
350

Здравствуйте.

У меня есть папка в которой лежит ряд страниц, эта папка закрыта от индексации в роботс. Но сегодня в панели вебмастера гугл в разделе оптимизация html, появились одна их этих страниц с пометкой отсутствует title, это конечно правда, но я думал google вообще не будет трогать эти страницы...

Zegeberg
На сайте с 30.09.2010
Offline
282
#1

Большинство директив robots являются не обязательными, а рекомендательными для Гугл, для Яндекса другое дело.

Ссылки с форумов, блогов и соц сетей ( https://forumok.com/p/c1710b6b/ ) Антибот ( https://antibot.cloud/?ref=15262 )
L
На сайте с 11.08.2010
Offline
38
#2

Zegeberg, я понял, спасибо!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий