Вопрос по robots.txt

gesik
На сайте с 17.05.2008
Offline
98
531

Здравствуйте, уважаемые форумчане, у меня вот такой вопрос :

Я в ДЛЕ хочу закрыть страницы на главной, т.е когда новости постятся, пусть выводятся на главную, но я не хочу чтобы индексировались дубли страниц, т.е страницы которые высвечиваются внизу главной :

sait.ru/page/

sait.ru/page/1/

sait.ru/page/2/

Т.е есть раздел программы (игры и т.д) , у него тоже есть страницы такого типа :

sait.ru/programs/page/

sait.ru/programs/page/1/

sait.ru/programs/page/2/

sait.ru/programs/page/3/ и т.д.

Как закрыть страницы в роботсе, чтобы индексировались страницы такого типа:

sait.ru/programs/page/1/

И не индексировались страницы такого типа :

sait.ru/page/ sait.ru/page/1/

Извините, если написал немного сумбурно :)

MACEDONSCIY
На сайте с 18.11.2010
Offline
31
#1
gesik:
Здравствуйте, уважаемые форумчане, у меня вот такой вопрос :
Я в ДЛЕ хочу закрыть страницы на главной, т.е когда новости постятся, пусть выводятся на главную, но я не хочу чтобы индексировались дубли страниц, т.е страницы которые высвечиваются внизу главной :
sait.ru/page/
sait.ru/page/1/
sait.ru/page/2/

Т.е есть раздел программы (игры и т.д) , у него тоже есть страницы такого типа :
sait.ru/programs/page/
sait.ru/programs/page/1/
sait.ru/programs/page/2/
sait.ru/programs/page/3/ и т.д.

Как закрыть страницы в роботсе, чтобы индексировались страницы такого типа:

sait.ru/programs/page/1/
И не индексировались страницы такого типа :
sait.ru/page/ sait.ru/page/1/

Извините, если написал немного сумбурно :)

Disallow: /page/

Как-то так напишите в роботс. Все будет индексироваться как надо!

оптим.рф (http://оптим.рф) - ООО "ОПТИМ" Комплексная оптимизация сайтов it-optim.com (http://it-optim.com) - Комплексный интернет маркетинг
gesik
На сайте с 17.05.2008
Offline
98
#2
MACEDONSCIY:
Disallow: /page/

Как-то так напишите в роботс. Все будет индексироваться как надо!

Спасибо :) Так и сделал :) Всё отлично работает, проверил в яндекс.вебмастер.

Спасибо большое.

Тему можно закрывать.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий