Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Закрыть индексацию страниц

P7

109

pava77

8 апреля 2016, 04:53

405

Всем привет

Подскажите плиз как можно закрыть от индексации страници поддоменов

Мне нужно такого типа страници

http://skype.site.com/repetitory/english/ - открыть для ПС

http://skype.site.com/repetitory/ - закрыть

http://skype.site.com/ - закрыть

L

261

livetv

8 апреля 2016, 12:41

#1

Файл robots.txt в корне сайте

User-agent: *

Disallow: /$

Disallow: /repetitory/$

Если нужно запретить подразделы /repetitory/ , тогда так:

Disallow: /repetitory/

Allow: /repetitory/english/

мета-тег на странице для запрещения:

<meta name="robots" content="noindex" />