Вопрос по файлу роботс

O
На сайте с 10.11.2010
Offline
14
220

Добрый день.

Возник вопрос в правильности написания файла роботс, сайт на битриксе и файл выглядит следующим образом (собственно как и рекомендует битрикс):

User-agent: *

Disallow: /bitrix/

Disallow: /upload/

Disallow: /search/

Allow: /search/map.php

Disallow: /club/search/

Disallow: /club/group/search/

Disallow: /club/forum/search/

Disallow: /communication/forum/search/

Disallow: /communication/blog/search.php

Disallow: /club/gallery/tags/

Disallow: /examples/my-components/

Disallow: /examples/download/download_private/

Disallow: /auth/

Disallow: /auth.php

Disallow: /personal/

Disallow: /communication/forum/user/

Disallow: /e-store/paid/detail.php

Disallow: /e-store/affiliates/

Disallow: /club/$

Disallow: /club/messages/

Disallow: /club/log/

Disallow: /content/board/my/

Disallow: /content/links/my/

Disallow: /*/search/

Disallow: /*PAGE_NAME=search

Disallow: /*PAGE_NAME=user_post

Disallow: /*PAGE_NAME=detail_slide_show

Disallow: /*/slide_show/

Disallow: /*/gallery/*order=*

Disallow: /*?print=

Disallow: /*&print=

Disallow: /*register=yes

Disallow: /*forgot_password=yes

Disallow: /*change_password=yes

Disallow: /*login=yes

Disallow: /*logout=yes

Disallow: /*auth=yes

Disallow: /*action=ADD_TO_COMPARE_LIST

Disallow: /*action=DELETE_FROM_COMPARE_LIST

Disallow: /*action=ADD2BASKET

Disallow: /*action=BUY

Disallow: /*print_course=Y

Disallow: /*bitrix_*=

Disallow: /*backurl=*

Disallow: /*BACKURL=*

Disallow: /*back_url=*

Disallow: /*BACK_URL=*

Disallow: /*back_url_admin=*

Disallow: /*index.php$

Disallow: /about/company/sales_rules/

Disallow: /help/payment/

В вебмастере от Я вижу, что загружено роботом 7 страниц, Исключено роботом 7 страниц, пометка что страницы запрещены к индексации:

/

/catalog/belts_for_man/

/catalog/polo/

/catalog/shawls-and-scarves/

/catalog/shoes_for_man/

/catalog/skirts/

/catalog/women/

все эти страницы прогоняю через Анализ robots там показывает, что страницы к индексации разрешены.

Ничего не понимаю. Яше написал, но пока жду хотел бы ваше мнение увидеть

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий