И снова robots.txt

[Удален]

31 октября 2009, 13:08

292

Есть сайт site.ru

На нем кроме остальных есть еще ссылки вида site.ru/data/*число*/ site.ru/data/page/*число*.

Нужно запретить индексацию:

site.ru/data/*число*/

Но при это оставить индексацию

site.ru/data/page/*число*

и

site.ru/data/

спасибо.

S

319

semenov

31 октября 2009, 13:14

#1

User-agent: *

Allow: /data/page/

Allow: /data/$

Disallow: /data/

User-agent: Yandex

Allow: /data/page/

Allow: /data/$

Disallow: /data/

Host: site.ru

58

Tyrbylentnost

31 октября 2009, 13:14

#2

User-agent: *

Disallow: /data/*число*/

[Удален]

31 октября 2009, 13:15

#3

semenov:
Allow: /data/page/
Allow: /data/$
Disallow: /data/

Спасибо!!

А $ это любое значение или только числовое?

S

319

semenov

31 октября 2009, 13:17

#4

$ - это конец строки