Форум Поисковые системы Каталоги сайтов

Посещают ли поисковики каталоги?

58

Kosmo

4 июня 2004, 10:53

1032

Посещают ли поисковики каталоги?

Ну например заходит ли Рамблер на yaca или Yandex в top100 и учитываются ли при этом как то ссылки?

Понятно что Р и Y это 2 крупных поисковика, А как обстоят дела с каталогами рангом пониже?

Яндекс, яндекс ты когда будешь индексировать меня

NL

212

NULL

4 июня 2004, 11:12

#1

Посещают ли поисковики каталоги?

Посмотрите у интересующего Вас каталога robots.txt и сразу узнаете. Вот, к примеру, содержимое http://yaca.yandex.ru/robots.txt:

User-Agent: yandex
Disallow: /yaca/
Disallow: /yandsearch
Disallow: /yandpage
Disallow: /norobot
Disallow: /yca

User-Agent: *
Disallow: /yaca/
Disallow: /yandsearch
Disallow: /yandpage
Disallow: /norobot
Disallow: /yca/geo
Disallow: /yca/src
Disallow: /yca/addr
Disallow: /yca/sect
Disallow: /yca/genre
Disallow: /yca/spos
Disallow: /yca/onl
Disallow: /yca/trg
Disallow: /yca/sft
Disallow: /yca/xxx
Disallow: /yca/synt
Disallow: /yca/grp
Disallow: /yca/ungrp
Disallow: /yca/tungrp
Disallow: /yca/time
Disallow: /yca/alf
Disallow: /yca/cy

Теперь заходите в в любую рубрику, смотрите на ее URL и делаете выводы.

279

Cossack

4 июня 2004, 11:26

#2

Хмм... свежо предание, а посмотреть слабо?

http://search.rambler.ru/srch?short=6&words=%F0%E5%EA%EB%E0%EC%E0+%DF%ED%E4%E5%EA%F1&hilite=30553b55

http://search.rambler.ru/srch?words=%F0%E5%EA%EB%E0%EC%E0+%DF%ED%E4%E5%EA%F1&filter=http://yaca.yandex.ru/

Прощание славянки... (http://www.youtube.com/watch?v=0xf9lFMWfKw)

K

737

Kost

4 июня 2004, 11:42

#3

Вроде одно другому не противоречит, т.е. /yca/cat/ разрешено индексировать всем поисковикам, кроме самого Яндекса.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

D

0

Dylan

6 июня 2004, 12:04

#4

Kosmo, посещают и активно.