K. Ermakov

K. Ermakov
Рейтинг
328
Регистрация
10.12.2004
The WishMaster:
Если в роботсе запретишь, то будет писать, что индексация запрещена

Текст ответа всё же будет отличаться:

Адрес ### не был внесен в базу Яндекса, так как он запрещен к индексации в файле robots.txt, или при обращении к robots.txt сервер вернул ошибку 5xx.

АRТЁM-Ш, а чем эта тема не устроила?

Устное замечание за кросспостинг.

=AnGer=, Вы уверены, что эффект именно от апа от 26 октября? Ведь был ещё один пересчёт.

Во избежание подобных апов тему закрываю.

agrotechnic, точно не писимизация (учите русский)!

Для того, чтобы понять, пессимизация или нет, мне не хватает информации по позициям Вашего сайта в Яндексе. Какими они были раньше, когда доля траффика была 60% и какими стали сейчас.

Разработчик:
вот, здесь всё написано

Ну, там ни слова про Trends не сказано :)

http://www.google.com/trends

saiko, я думаю, многие из присутствующих здесь возмутились бы не меньше Вашего такой выдачей. Однако, правилами форума предусмотрен запрет разного рода стуков. Вот точная цитата из правил:

Запрещено помещение сообщений, содержащих информацию о неблаговидных методах, применяемых при продвижении конкретных сайтов (прямое, например УРЛ или имя, и косвенное упоминание, например запрос и место результатах поиска), а также применяемых другими участниками форума. Для сообщения администрациям поисковых систем о случаях спама следует сообщать непосредственно администрации поисковых систем. Такие сообщения удаляются, а их авторы – штрафуются.
organic:
т.е понятно, что роботам они вот это дают http://www.webmasterworld.com/robots2

А если зайдёте с User-Agentом, например, Slurp, то и по адресу http://www.webmasterworld.com/robots.txt получите другой файл. Клоачат они бессовестно! :)

***

Каширин, с учётом поддержки Гуглом директивы Allow: и * с $, думаю, проблем не будет.

rengen, это не по Вашей теме тут дискуссия идёт?

Поздравляю! Всех благ

СКОРПИОН:
А то в сложных проектах robots уже на несколько страниц тянет, из-за отдельного описания под каждый бот...

А такой robots видели? :)

http://www.webmasterworld.com/robots.txt

(впрочем, баян баянистый)

Всего: 6032