Правильность написания Robots.txt

123
AVV
На сайте с 31.07.2006
Offline
84
AVV
#11
Zlodey:
а вот как быть с файлами которые лежат в директории вместе с папками (php) их тоже по отдельности прописывать по именам?

Пропишите, их же всего пять.

6666:
Ваша картинка может вообще на другом сайте приндексироваться.

6666, так ТС нужно не закрыть картинки, а наоборот, чтобы они проиндексировались. Причем, именно на этом сайте.

Z
На сайте с 20.02.2007
Offline
60
#12

Спасибо всем за участие, пойду роботов мучить.

6666
На сайте с 10.01.2005
Offline
505
#13
AVV:
6666, так ТС нужно не закрыть картинки, а наоборот, чтобы они проиндексировались

Блин. Я про то и говорю, что они проиндексируются. :)

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
Z
На сайте с 20.02.2007
Offline
60
#14

Подскажите, правильно ли я прописал запрет :1 - для всей папки css 2 - для отдельного файла JSCookTree.js

1 - Disallow: /components/com_virtuemart/css/

2 - Disallow: /components/com_virtuemart/shop_image/JSCookTree.js

Или нужно в конце файла "/" ставить?

Заранее благодарен.

AVV
На сайте с 31.07.2006
Offline
84
AVV
#15

Zlodey, правильно. Слеш во втором случае не нужен.

Можно также просто:

Disallow: /components/com_virtuemart/shop_image/JSCookTree

без .js в конце.

6666, не хочется затевать пустой спор, т.к. возможно я вас не понял. Но, какой смысл ждать, пока картинки проиндексируются на другом сайте, и, к тому же, гадать - произойдет ли это, если можно просто открыть доступ на своем сайте?

Z
На сайте с 20.02.2007
Offline
60
#16

Почему на другом то , это мой сайт и роботс на моем сайте.

tommy-gung
На сайте с 22.11.2006
Offline
294
#17

AVV, я понял так, что 6666 хотел сказать о том, что если кто-то вставит картинку тс на своем сайте, пропишет alt, то она проиндексируется, как с сайта на котором установлена, а не физически расположена

ну это, как я понял :)

если не так, то прошу прощения

Здесь не могла быть ваша реклама
AVV
На сайте с 31.07.2006
Offline
84
AVV
#18
Zlodey:
Почему на другом то , это мой сайт и роботс на моем сайте.

Zlodey, делайте, как вам сказали, и да будет вам счастье.

tommy-gung, спасибо за разъяснение, теперь понял.

Z
На сайте с 20.02.2007
Offline
60
#19

Лучше поясните вот что?

Отсутствие слешей при указании директории

Как в этом случае поступит робот?

User-agent: Yandex

Disallow: john

По стандарту, он не будет индексировать файл с именем “john” и директорию с именем “john”. Для указания только директории надо писать так:

User-agent: Yandex

Disallow: /john/

То есть если у меня запрещено так: Disallow: /components/

это запрещает абсолютно все папки и файлы в данной директории или как?

AVV
На сайте с 31.07.2006
Offline
84
AVV
#20

Zlodey,

User-agent: *

Disallow: /john

Не будет индексировать файл, имя которого начинается с “john” и директорию имя которой начинается с “john”.

--

User-agent: *

Disallow: /john/

Не будет индексировать директорию с именем “john” и все файлы и папки в ней.

--

User-agent: *

Disallow: /components/

Запрещает абсолютно все папки и файлы в данной директории.

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий