robots.txt или noindex?

123
K
На сайте с 31.01.2001
Offline
737
#11
lika:
в robots.txt (Disallow: *xls

это нестандарт, не работает (возможно только в Гугле и все).

Надо сложить все файлы *.xls в одну папку (например /xls) и запретить ее индексацию в robots.txt:

User-agent: *

Disallow: /xls

Ну и не помешает прочитать букварь типа http://www.yandex.ru/info/webmaster2.html#robots

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
СКОРПИОН
На сайте с 05.01.2006
Offline
120
#12
lika:
СКОРПИОН, опыт показывает, что индексирует

Пример, пожалуйста...

• Контекстные ссылки с внутренних страниц навсегда (/ru/forum/370882) • Качественные сайты для заработка на контекстной рекламе и ссылках
pro-maker
На сайте с 08.12.2003
Offline
281
#13

СКОРПИОН, а мой пример чем не устраивает?

-=Илья=-
На сайте с 05.12.2003
Offline
222
#14

О, пока я исправлял пост, Kost уже всё написал :)

P2
На сайте с 16.09.2005
Offline
183
#15
-=Илья=-:
Disallow: *xls
Это что такое? Я такой инструкции в руководстве по robots.txt что-то не припоминаю. Тег <noindex> - туда же. Лучше положите все эти файлы в отдельную папочку и вот её-то и запретите.

Более того, это может только Гугл взять. Яндексы и остальные наши поискове системы это еще не научились делать

-=Илья=-
На сайте с 05.12.2003
Offline
222
#16

Pavel2005, не совсем так. Вот хороший пример отображения xls файлов в выдаче: http://www.yandex.ru/yandsearch?text=xls&stype=www

Причём это Яндекс делает довольно-таки давно.

СКОРПИОН
На сайте с 05.01.2006
Offline
120
#17
pro-maker:
СКОРПИОН, а мой пример чем не устраивает?

Пропустил сообщение, извиняюсь...

Это они из себя умных изображают. Индексируют ссылку на документ, засовывают в кэш то, что удалось выдрать из файла (при этом не индексируя содержимого, даже не выдирая ссылок) и показывают со значком (xls). В отличие от того же DOC или PDF, где индексируется содержимое документа, по которому потом осуществляется поиск. А так можно сказать, что Яндекс и .com , и .exe индексирует ... :)

Хотя, скорее всего, они почти готовы к полноценной индексации...

Что мешает на лету перевести файл из .xls в .html и проиндексировать его.

L
На сайте с 24.10.2005
Offline
24
#18

Положить все .xls файлы в одну папку не получится в силу особенностей построения архитектуры проекта.

Про конструкцию Disallow: *.xls чилала в одной переводной статье, может быть, там другие стандарты?

Остается noindex?

У этого решения есть существенные недостатки?

СКОРПИОН
На сайте с 05.01.2006
Offline
120
#19
lika:
Остается noindex?
У этого решения есть существенные недостатки?

Это только для Яндекса.

Skyter
На сайте с 17.02.2005
Offline
175
#20
СКОРПИОН:
Это только для Яндекса.

Может не совсем только для Яндекса?

Юрий Батиевский www.antop.ru (http://www.antop.ru/): тел: +7 903 796 05 86 Ищу SEO-специалиста, специалиста по контекстной рекламе, интернет-маркетолога.
123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий