помогите закрыть от индексации страницы вида...

1 234
I
На сайте с 02.12.2005
Offline
99
#31

блин запутался совсем :(...структура роботс такая правильная или нет(тоже нада запретить индексацию страниц вида www.site.ru/index.html?page=12312312313 ибо таких тсраниц вообще нет)

User-agent: *

Disallow: /forum/cashe/

Disallow: /forum/profile

Disallow: /forum/online

Disallow: /forum/userlist

Disallow: /forum/post

Disallow: /forum/edit

Disallow: /forum/moderate

Disallow: /forum/search

Disallow: /forum/register

Disallow: /forum/misc

Disallow: /forum/login

Disallow: /forum/config

Disallow: /forum/delete

Disallow: /forum/admin

User-agent:Yandex

Disallow: /index.html?

Disallow: /forum/cashe/

Disallow: /forum/profile

Disallow: /forum/online

Disallow: /forum/userlist

Disallow: /forum/post

Disallow: /forum/edit

Disallow: /forum/moderate

Disallow: /forum/search

Disallow: /forum/register

Disallow: /forum/misc

Disallow: /forum/login

Disallow: /forum/config

Disallow: /forum/delete

Disallow: /forum/admin

Динамика изменения курса евро и бакса (http://valuta.itemp.ru/)
Jackyk
На сайте с 05.10.2005
Offline
342
#32
iDrum:
Disallow: /index.html?

В этом случае Вы запретите все страницы, что начинаются с /index.html?, то есть в том числе и site.ru/index.html?page=12312312313. Вот только если их, как Вы пишете, "вообще нет", то зачем запрещать к индексации то, чего и так нет? А если они таки есть, то почему Вы запрещаете их только для Яндекса?

С уважением, Евгений.
I
На сайте с 02.12.2005
Offline
99
#33

Jackyk, точно,поспешил,нада для всех....а нет страниц таких нет для людей,для роботов они есть ибо отдают 200

I
На сайте с 02.12.2005
Offline
99
#34

вот так и знал : в индексе

www.site.ru/index.html?page=316290295 · 25 КБ

попробую "лечить":

User-Agent: Yandex

Disallow: /?

Disallow: /index.html?

Disallow: /print/

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий