Вопрос по Robots.txt

L
На сайте с 17.05.2013
Offline
88
397

Мне нужно чтобы из новостей индексировалась только страница:

site.com/news/

а все что идет после news/ чтобы было запрещено.

Подскажите при следующей директиве, будет ли проиндексирована страница site.com/news/ ?

Директива: Disallow: /ru/news/

Алексей Барыкин
На сайте с 04.02.2008
Offline
272
#1

Disallow: /news/*

Подскажите при следующей директиве, будет ли проиндексирована страница site.com/news/ ?

Директива: Disallow: /ru/news/

Правило Disallow: /ru/news не будет запрещать индексацию site.com/news/

L
На сайте с 17.05.2013
Offline
88
#2

Что-то не понял. Так как должно быть правильно

Disallow: /news/*

или

Disallow: /news

??

Алексей Барыкин
На сайте с 04.02.2008
Offline
272
#3
luckydan:
Что-то не понял. Так как должно быть правильно
Disallow: /news/*
или
Disallow: /news

??

Посимвольно сравни мой ответ и свои два варианта.

L
На сайте с 17.05.2013
Offline
88
#4

Если я правильно понял должно писать сразу 2 директивы:

Disallow: /ru/news/*

Disallow: /ru/news

?

Алексей Барыкин
На сайте с 04.02.2008
Offline
272
#5
luckydan:
Если я правильно понял должно писать сразу 2 директивы:
Disallow: /ru/news/*
Disallow: /ru/news

?

Откуда вылезло про две строки и про /ru/news?

L
На сайте с 17.05.2013
Offline
88
#6

Извиняюсь я пропустил в самому первом посте

Сам сайт лежит по адресу: site.com/ru/

соответственно и новости site.com/ru/news/

Алексей Барыкин
На сайте с 04.02.2008
Offline
272
#7

Disallow: /ru/news запрещает:

- site.com/ru/news

- site.com/ru/news/

- site.com/ru/news/bla-bla-bla

Disallow: /ru/news/* запрещает только site.com/ru/news/bla-bla-bla

L
На сайте с 17.05.2013
Offline
88
#8

Спасибо!!!

ZoomY
На сайте с 07.11.2008
Offline
165
#9
Алексей Барыкин:
Disallow: /ru/news/* запрещает только site.com/ru/news/bla-bla-bla

Не только. Также он запрещает site.com/ru/news/ со слешом на конце.

Что ж вы новичка-то в заблуждение вводите.

---------- Добавлено 16.04.2014 в 12:30 ----------

luckydan:
Мне нужно чтобы из новостей индексировалась только страница:
site.com/news/
а все что идет после news/ чтобы было запрещено.

Disallow: /ru/news/

Allow: /ru/news/$

Размещу ваши статьи на сайтах с тИЦ до 1400 по 5$ (/ru/forum/846111) Сейчас многие ищут хостинг за пределами России. Ukrnames - один из лучших вариантов: (http://ukrnames.com/?ref_id=114) и лидер рынка, и привычно, и по-русски, и вне юрисдикции РФ.
LovelAss
На сайте с 05.06.2009
Offline
96
#10

Allow: /ru/news/$

Disallow: /ru/news/

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий