Вопрос снят.
Я не сходил по ссылке, которую привел Veles, а основывался только на сообщении от antono.
Имелось ввиду - если нет ни одной директивы Disallow - то роботс написан не по стандарту.
A Standard for Robot Exclusion:
Андрей, может все-таки лучше следовать стандартам?
С уважением,
Сергей Пасечник.
Ссылка по теме: Google may let surfers rank search results и комментарий (правда достаточно старый) Александра Садовского:
Замечу, что "могут стать реальностью через месяц или полгода" было сказано в мае 2002 года. То есть все могло реально измениться с тех пор.
На странице помощи никакой информации относительно кнопок голосования нет, также как и информации о том, какой от них практический толк получает Гугл и как он это использует.
Хотя есть неподтвержденное мнение, что эта информация будет как-то использоваться (уже используется?) в персональном поиске Google.
Rinka, советую почитать вот эту тему. Жаль, там много ответов попропадало.
Вот ссылки на кэш тех страниц в Яндексе. Думаю, сможете разобраться
1. http://hghltd.yandex.com/yandbtm?url=http%3A//forum.searchengines.ru/showthread.php%3Ft%3D33842&text=%CF%E5%F0%E5%E4%E0%F7%E0+%F2%C8%D6+%E8+%E2%C8%D6+%F1+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5+%F5%EE%F1%F2%E8%ED%E3%EE%E2.&reqtext=%28%28%CF%E5%F0%E5%E4%E0%F7%E0%3A%3A8313+%26+%F2%C8%D6%3A%3A3871831+%26+%E8%3A%3A0+%26+%E2%C8%D6%3A%3A66487+%26+%F1%3A%3A0+%26+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5%3A%3A3766+%26+%F5%EE%F1%F2%E8%ED%E3%EE%E2%3A%3A7539%29//6+%3C%3C+%28domain%3D%22searchengines%22%3A%3A2063133498%3A0+%26/%281+1%29+domain%3D%22ru%22%3A%3A759%3A0+%26/%281+1%29+domain%3D%22root%22%3A%3A574%3A0%29%3A0%29&dsn=0&d=6609630&isu=1
2. http://hghltd.yandex.com/yandbtm?url=http%3A//forum.searchengines.ru/showthread.php%3Ft%3D33842%26page%3D2&text=%CF%E5%F0%E5%E4%E0%F7%E0+%F2%C8%D6+%E8+%E2%C8%D6+%F1+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5+%F5%EE%F1%F2%E8%ED%E3%EE%E2.&reqtext=%28%28%CF%E5%F0%E5%E4%E0%F7%E0%3A%3A8313+%26+%F2%C8%D6%3A%3A3871831+%26+%E8%3A%3A0+%26+%E2%C8%D6%3A%3A66487+%26+%F1%3A%3A0+%26+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5%3A%3A3766+%26+%F5%EE%F1%F2%E8%ED%E3%EE%E2%3A%3A7539%29//6+%3C%3C+%28domain%3D%22searchengines%22%3A%3A2063133498%3A0+%26/%281+1%29+domain%3D%22ru%22%3A%3A759%3A0+%26/%281+1%29+domain%3D%22root%22%3A%3A574%3A0%29%3A0%29&dsn=-6&d=6444279&isu=1
3. http://hghltd.yandex.com/yandbtm?url=http%3A//forum.searchengines.ru/showthread.php%3Ft%3D33842%26page%3D3&text=%CF%E5%F0%E5%E4%E0%F7%E0+%F2%C8%D6+%E8+%E2%C8%D6+%F1+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5+%F5%EE%F1%F2%E8%ED%E3%EE%E2.&reqtext=%28%28%CF%E5%F0%E5%E4%E0%F7%E0%3A%3A8313+%26+%F2%C8%D6%3A%3A3871831+%26+%E8%3A%3A0+%26+%E2%C8%D6%3A%3A66487+%26+%F1%3A%3A0+%26+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5%3A%3A3766+%26+%F5%EE%F1%F2%E8%ED%E3%EE%E2%3A%3A7539%29//6+%3C%3C+%28domain%3D%22searchengines%22%3A%3A2063133498%3A0+%26/%281+1%29+domain%3D%22ru%22%3A%3A759%3A0+%26/%281+1%29+domain%3D%22root%22%3A%3A574%3A0%29%3A0%29&dsn=165&d=2803275&isu=1
4. http://hghltd.yandex.com/yandbtm?url=http%3A//forum.searchengines.ru/showthread.php%3Ft%3D33842%26page%3D4&text=%CF%E5%F0%E5%E4%E0%F7%E0+%F2%C8%D6+%E8+%E2%C8%D6+%F1+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5+%F5%EE%F1%F2%E8%ED%E3%EE%E2.&reqtext=%28%28%CF%E5%F0%E5%E4%E0%F7%E0%3A%3A8313+%26+%F2%C8%D6%3A%3A3871831+%26+%E8%3A%3A0+%26+%E2%C8%D6%3A%3A66487+%26+%F1%3A%3A0+%26+%E1%E5%F1%EF%EB%E0%F2%ED%FB%F5%3A%3A3766+%26+%F5%EE%F1%F2%E8%ED%E3%EE%E2%3A%3A7539%29//6+%3C%3C+%28domain%3D%22searchengines%22%3A%3A2063133498%3A0+%26/%281+1%29+domain%3D%22ru%22%3A%3A759%3A0+%26/%281+1%29+domain%3D%22root%22%3A%3A574%3A0%29%3A0%29&dsn=173&d=2661706&isu=1
ну и так далее...
http://webmaster.yandex.ru/faq.xml?id=502499#user-agent
В таких случаях лучше давать ссылку на Официальный Стандарт роботс.тхт, помимо ссылки на соотвествующий раздел помощи на Яндексе.
Версия Polite Moose - это одна из проверяемых версий, а Вы ее принимаете, как окончательный выявленный принцип сортировки.
Может быть в чем-то он прав, но на первом же оттестированном мной сайте принцип не сработал, что ставит его под сомнение. На работе я более детально его оттестирую, но в отличие от Вас, не буду ставить точку в этом вопросе.
Бан ставится только вручную, так как надо быть окончательно увереным, что сайт действительно нарушил какой-то серьезный запрет.
Насколько я помню, сам Сегалович в свое время это говорил.
(доры - исключение из этого правила, они банятся автоматом)
Извините, но незнание закона не освобождает от ответственности.
Рано или поздно узнает, поймет, что был неправ, исправится, попросит восстановить - восстановят.
Как в свое время сказал Илья Сегалович:
:)
Яндекс это делать не только не должен, но и не станет:
1. Вебмастеров слишком много, чтоб каждому что-то объяснять. Тем более учить молодежь.
2. Они не станут раскрывать полный список того, за что накладывают санкции.
3. Действия "вебмастера" могут быть целенаправленными, а не случайными. Хотя это логически своится к пункту 2.
Известный случай с письмами вебмастерам от Гугла - не приводить. Там ситуация совершенно другая.
Константин, я бы поставил вопрос совершенно по другому: не "какой порядок сортировки у бэклинков?", а "существует ли вообще какой-либо осмысленный порядок сортировки бэклинков?".
Что такое запрос бэклинков?
Это некая справочная информация, связанная с конкретным сайтом, которая выдается по конкретному запросу. Этой информацией пользуются как обычные мастера, так и оптимизаторы - это стало понятно давно. Так как поисковая система пытается максимально ограничить выход информации о принципах сортировки наружу, то и сортировку бэклинков не будет проводить по каким-то внутренним (информационно значимым) критериям, которые могут быть использованы оптимизаторами при своей работе с сайтами. Это первый арумент. А какой вообще смысл в том, чтобы бэки хоть как-то осмысленно сортировать (ну может быть кроме как по дате)? Это второй аргумент. Этой информацией не пользуются обычные пользователи, стало быть нет смысла вкладывать ителлектуальные ресурсы в придумывание каких-либо принципов такой сортировки по причине их неиспользованности. Это третий аргумент. И зачем этой бесполезной (с точки зрения поисковой системы) сортировкой заргужать сервера? У них что, бэз этого работы нет? Это четвертый аргумент.
Можно примерно прикинуть какие фильтры сортировки могли бы быть:
1. По вицу. Исключено, ссылки расположены совершенно разнобойно. Так как связь между PageRank и ВИЦ имеется с точностью до объема базы, принципа рассчитывания и ключевых коэффициентов в формуле, то никогда не поверю, что ссылка с ffa будет цениться выше ссылки с весомой морды, хотя зачастую мордовые ссылки находятся вперемешку с мелкими каталожными и ffa'шечными.
2. По ТИЦу. Аналогично не прокатывает. Тематики и числа перепутаны.
3. По дате появления ссылки и учитывания ее в рассчетах. Судя по наблюдениям - здесь тоже полный бардак.
4. По количеству ссылок с домена на указанный сайт. Тоже не прокатывает. Судя по наблюдениям - числа не упорядочены.
5. ... т.п.
Скорее всего, что когда поисковик получает запрос на выдачу всех бэклинков определенного сайта, он направляет запрос на каждую машину своих кластеров, получает от них списки, склеивает их в произвольном порядке и выдает в качестве ответа на запрос.
Можно, конечно, погадать, по каким принципам сортируются ссылки в серверах кластеров поисковых систем, но имхо цель не оправдает вложенные в ее выяснение средства.
Все вышесказанное - не более, чем мои предположения.
Приеду-приеду, рано или поздно. :)
