Вопрос по robots.txt

gumza
На сайте с 10.08.2006
Offline
138
495

Возможно ли закрыть от индексации файлы, содержащее в себе слово slon, например.

Для примера, есть папки, а в них файлы:

/krasnii/kr_slon_1.php

/krasnii/kr_slon_2.php

/krasnii/krasnii.php

/sinii/sin_slon_1.php

/sinii/sin_slon_2.php

/sinii/sinii.php

/zelenii/zel_slon_1.php

/zelenii/zel_slon_2.php

/zelenii/zelenii.php

Можно ли запретить к индексации все файлы, содержащие слово slon?

Папки запретить нельзя, т.к. там имеются файлы, которые надо индексировать.

Новый способ повышения просмотров, конверсий и продаж (/ru/forum/995009)
K
На сайте с 31.01.2001
Offline
737
#1

В стандарте такой возможности нет, Яндекс это не позволяет.

Возможно, Google и Yahoo поймут шаблон со звездочкой, надо почитать их описания.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
SE_LM
На сайте с 25.04.2006
Offline
56
#2

По моему нельзя, точно знаю что можно запретить файлы начинающиеся на определенное слово.

Анализируем сайты (http://www.se-lm.ru/page/seo-analiz-saita)
FishB1
На сайте с 15.10.2006
Offline
75
#3

Вот тут примерно то же самое обсуждается...

С уважением, Евгений Г.
Каширин
На сайте с 03.01.2004
Offline
1030
#4
Kost:
В стандарте такой возможности нет, Яндекс это не позволяет.

Не позволяет.

Kost:
Возможно, Google и Yahoo поймут шаблон со звездочкой, надо почитать их описания.

Поймут оба.

gumza:
Можно ли запретить к индексации все файлы, содержащие слово slon?

Можно url таких файлом перепереть с помощью .htaccess к виду, который понимает любой robots.txt 😎 Ведь .htaccess понимает регулярные выражения куда лучше, чем robots.txt ;)

alexspb
На сайте с 14.11.2005
Offline
187
#5

robots.txt весч хорошая, но не забываем возможности HTML

Есть тэг <meta name="robots" content="noindex">, который вы можете вставить по любому условию при наличии вменяемой CMS.

Это если совсем лень разбираться в том, что советует Каширин.

SS
На сайте с 03.09.2004
Offline
141
#6
gumza:
Возможно ли закрыть от индексации файлы, содержащее в себе слово slon, например.

Вполне возможно, что Яндекс тоже введет аналогичные Гуглу и Яху конструкции "*" и "$". Это позволит настроить файл robots.txt так, как необходимо топикстартеру. На текущий момент для роботов Google и Yahoo! закрыть от индексации страницы, содержащие слово "slon" можно вот такой конструкцией:

Disallow: /*slon*

(Насчет Яху не уверен, а для Гугла должно работать).

Для Яндекса, к сожалению, шаблон сделать пока невозможно.

С уважением, Сергей

«Клянусь своей жизнью и любовью к ней, что никогда не буду жить ради другого человека и никогда не попрошу и не заставлю другого человека жить ради меня» (с) Джон Галт

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий