Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Роботс для DLE

Gaborik
На сайте с 27.03.2010
Offline
80
Gaborik
357

Всем привет. Подскажите, в выдаче Яндекса и Гугла имеются такие страницы:

http://www.site.ru/grafik/page/2/
http://www.site.ru/download-manager/page/2/

Что нужно прописать, чтобы /page/ и /page/2/ не было в выдаче.

Disallow: /page

Не помогает, он закрывает от индекса такие страницы:

http://www.site.ru/page/2/
http://www.site.ru/page/3/
Живу одним днём...
cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#1
Gaborik:
Что нужно прописать, чтобы /page/ и /page/2/ не было в выдаче.

Disallow: /*page/$

Disallow: /*page/2/$

Запретит все страницы заканчивающиеся на page/2/ и page/

Иван Чередов (http://ivan.cheredov.com/about/)
Gaborik
На сайте с 27.03.2010
Offline
80
Gaborik
#2
cheredov:
Disallow: /*page/$
Disallow: /*page/2/$
Запретит все страницы заканчивающиеся на page/2/ и page/

Спасибо, теперь Disallow: /page я могу удалить и за место него поставить в роботсе это:

Disallow: /*page/$

Disallow: /*page/2/$

?

cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#3
Gaborik:
Спасибо, теперь Disallow: /page я могу удалить и за место него поставить в роботсе это:
Disallow: /*page/$
Disallow: /*page/2/$
?

Да конечно.

Единственное замечание и вопрос к к гуру:

Эти строки запретят http://www.site.ru/downloadpage/ ?

Может правильно так? :

Disallow: /*/page/$

Disallow: /*/page/2/$

cheredov добавил 14.07.2011 в 18:32

Я склоняюсь ко второму варианту :o

Вопрос к Гуру или Редирект с главной и Настройка .htaccess & robots.txt
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#4
cheredov:
Единственное замечание и вопрос к к гуру:
Эти строки запретят http://www.site.ru/downloadpage/ ?
Может правильно так? :
Disallow: /*/page/$
Disallow: /*/page/2/$

Конечно...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий