На всех страницах, которые предполагаются, что будут проиндексированы поисковой системой.
NB. Информация из Description не участвует в вычислении релевантности, но, определенно, влияет на выбор пользователя сайта из списка результатов - чем более привлекательными будут текст ссылки в результатах поиска и описание, тем больше шансов получить посетителя.
Это-то я почти догадался, но вот используется ли информация из WISENut'а в LookSmart'е?..
Восстановите, пожалуйста. Это будет очень полезный опыт.
Просто потому, что об этом говорили сами разработчики. Сегалович, если не ошибаюсь... :)
Адресок для коллекции?.. :)
Не ИМХО, а точно ;) - лично проверял.
Я даже могу добавить: робот D напрямую влияет на пополнение поисковой базы, передавая взятые документы индексатору. Т.е. этот робот не может не называться индексирующим.
Запрещенные страницы, правда, удаляются, но, как в мультике, "это было уже весной".
Во-во... Получается, что рождается очередная дыра для производства спама. Тем более, что всегда можно написать флешку (как любую программу) так, что в ней будет много текста, который никогда не будет выводиться на экран.
Интересно, есть ли уже у FAST методы борьбы с этим?
Поддерживаю идею. Тем более, что так проще понять, что у темы есть продолжение на следующей странице - когда читаешь ее со страницы "Новые сообщения", переход на тему автоматом бросает куда-то в середину и приходится проматывать всегда за форму, чтобы не пропустить возможного перехода обсуждения.
...или для запросов, на которые, почему-то не обратил еще толком никто свое внимание. Но таких становится все меньше и меньше... :D