Вопрос гуру по robots.txt

35

Gora4e

27 февраля 2012, 19:08

313

Есть сайт (далее site.ru). На сайте есть страничка блога site.ru/blog. Суть в том, что постоянно создаются страницы site.ru/blog/page/2, site.ru/blog/page/3 ....и т.д.

Как оставить в индексе только страницу site.ru/blog ? Редирект делать не вариант, таких страниц очень много, и они постоянно добавляются.

Заранее спасибо всем откликнувшимся.

Еще один вопрос, нужно ли закрывать от индекса страницы рубрик?

222

iren K

27 февраля 2012, 19:14

#1

Gora4e:
Есть сайт (далее site.ru). На сайте есть страничка блога site.ru/blog. Суть в том, что постоянно создаются страницы site.ru/blog/page/2, site.ru/blog/page/3 ....и т.д.

Как оставить в индексе только страницу site.ru/blog ? Редирект делать не вариант, таких страниц очень много, и они постоянно добавляются.

Заранее спасибо всем откликнувшимся.

Еще один вопрос, нужно ли закрывать от индекса страницы рубрик?

для начала попробуте запретить сесии:

php_flag session.use_only_cookies On

php_flag session.use_trans_sid Off

c уважением Iren

427

siv1987

27 февраля 2012, 19:16

#2

Disallow: /blog/page/

35

Gora4e

27 февраля 2012, 19:34

#3

siv1987:
Disallow: /blog/page/

Это не запретит доступ к /blog ?

427

siv1987

27 февраля 2012, 19:36

#4

Gora4e:
Это не запретит доступ к /blog ?

http://help.yandex.ru/webmaster/?id=996567

http://webmaster.yandex.ru/robots.xml

76

Meravingen

29 февраля 2012, 05:56

#5

Сюда же.

Я правильно понимаю, что правило

Disallow: /*?filter

Запретит доступ к:

http://site.ru/folder1/?filter

http://site.ru/folder1/folder2/?filter

Но не запретит доступ к:

http://site.ru/folder1/

??

VK приобрела 70% в структуре компании-разработчика red_mad_robot

Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ