Странности с индексацией сайта

TS
На сайте с 07.05.2008
Offline
53
602

Нужен совет знающего человека. Сайт на joomla. Проблема в том, что оказались проиндексированными страницы, которые вроде как были исключены файлом robots.txt - то есть в индекс попадают страницы с адресами типа http://www.mysite.ru/component/content/frontpage.html. В файле robots.txt запрет на индексирование, к примеру, этой папки обозначен так - Disallow: /components/

Если я перепишу подобные штуки, заменив их на Disallow: /components

- это решит проблему? Если нет - то что делать? И если проблема не в файле для роботов - то в чем она тогда?

В следующей жизни я стану Бэтменом
[Удален]
#1

Напишите свой сайт, без этого трудно что-то сказать.

impossible
На сайте с 12.01.2008
Offline
224
#2

вы сами же и указали свою ошибку:

ссылки у вас ... /component/ ...

а роботсе у вас: componentS

RR
На сайте с 16.12.2010
Offline
0
#3

http://webmaster.yandex.ru/robots.xml

Используйте данный сервис, чтоб проверить правильность своего robots.txt

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий