Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Закрыть страницы навигации в robots.txt

91

Arther

17 апреля 2012, 19:56

390

Здраствуйте всем. Хотелось бы узнать как правильно закрыть от индексации странцы навигации

пример:

http://xxx.ru/page/2/

http://xxx.ru/page/1212/

User-agent: *
Disallow: /*page

правильно ли я закрыл страницы ?

A

55

artool

17 апреля 2012, 20:16

#1

Если приведённый вами пример соответствует действительности и статьи у вас доступны без /page/, то так будет правильнее

User-agent: *
Disallow: /page/

MS

42

mr_slm

17 апреля 2012, 20:17

#2

User-agent: *

Disallow: /page/2/

Disallow: /page/1212/

119

Filan

17 апреля 2012, 21:07

#3

Arther:
Здраствуйте всем. Хотелось бы узнать как правильно закрыть от индексации странцы навигации

Если все хотите закрыть, то первый вариант, если какие то отдельные, второй.