К сожалению, инструкций Allow в файлах robots.txt не бывает. Поэтому даже если закрытых для индексирования документов очень много, Вам все равно придется перечислять именно их, а не немногочисленные "открытые" документы. Продумайте структуру сайта, чтобы закрытые для индексирования документы были собраны по возможности в одном месте.
Мы стараемся не индексировать или не ранжировать высоко:
* сайты, копирующие или переписывающие информацию с других ресурсов и не создающие оригинального контента,
* страницы и сайты, единственной целью которых является перенаправление пользователя на другой ресурс, автоматически («редирект») или добровольно
Psycho: но LI, как и, полагаю, Аналитикс отбрасывает параметры из УРЛа и, возможно, именно это беспокоит ТС. Так, переход из любого топика на серче будет выглядеть так:
На странице изменения описания ставите галочку "не отбрасывать параметры у ссылок". Все параметры отображаются. :)
Дайте Яндексу привыкнуть к изменениям на вашем сайте.
Что значит привыкнуть к изменениям?
при поиске показывает старый тайтл, щелкаю на сохраненную копию - там свежак...
В общем подскажите в какую сторону думать.?
В сторону кэша думайте.
КАК этот сайт до сих пор находится в индексе яндекса???
Сидит под глухим фильтром, всего и делов-то.
(про Рамблер не знаю)
Я знаю. Единственный наверно, кто не понимает.
http://help.rambler.ru/article.html?id=327&s=221
тс просто про линкбомбинг ничего не слышал...
Одна ссылка с форумного профиля это явно не линкбомбинг. ;)
ТС, а что не так-то?
Dissalow: /slovo1/slovo2/page
Disallow. ☝
Что это?
Фильтрация по сниппету. Переписывайте дублируемый текст.
не подскажете что могло произойти ??
А там индексировать-то особо и нечего.
Ваш случай:
* сайты, копирующие или переписывающие информацию с других ресурсов и не создающие оригинального контента,
* страницы и сайты, единственной целью которых является перенаправление пользователя на другой ресурс, автоматически («редирект») или добровольно
http://help.yandex.ru/webmaster/?id=995298#995342
но LI, как и, полагаю, Аналитикс отбрасывает параметры из УРЛа и, возможно, именно это беспокоит ТС. Так, переход из любого топика на серче будет выглядеть так:
На странице изменения описания ставите галочку "не отбрасывать параметры у ссылок". Все параметры отображаются. :)