Да -- обычная ссылка. Но у других пауков я такого не замечал.
Miha Kuzmin, спасибо. В robots.txt наврядли, а вот про .htaccess и не подумал. Еще раз благодарю.
Я в разделе "Yandex, Rambler и другие поисковики Рунета" уже такой вопрос задавал. Есть ссылка на скрипт например поиска в каталоге, где ведется статистика запросов. В базу записывается дата, время, поисковый запрос и ip с которго он делался. Так вот раньше, если смотреть по логам сервера, пауки ходили по эти ссылкам, но в статистику не записывались. А тут в субботу Яндекс и Гугл отбились в базе. Вот они:
glagol.yandex.ru
ya.yandex.ru.
и
crawler10.googlebot.com
crawler11.googlebot.com
crawler14.googlebot.com
На счет Яндекса я спрашивал здесь --
Как-то странно вот эти у меня на счетчике отбиваются. У меня такое когда-то было со склеивающим ботом Яндекса. Началось это с субботы.
Возможно, но как я заметил, довольно много сайтов пользуется этим премом. На новостных сайтах это повсеместно. Многих прийдется забанить.
Берем http://punto.ru/fuzzy и получаем забавные вещи:
http://yaca.yandex.ru/yandsearch?text=%E8%ED%E5%F0%ED%E5%F2&rpt=rs2
http://yaca.yandex.ru/yandsearch?rpt=rs2&text=%E8%ED%F2%F0%E5%ED%E5%F2
...
Когда-то Mail.Ru в одном абзаце писали "вы" как с маленькой, так и с большой буквы, дабы не промазать. Наверное Яндекс руководствовался тем же правилом.
Kost, я это прекрасно понимаю. Я имел ввиду всего-навсего орфограию -- кампанию и компанию
Как думаете, кнопки голосования на что-то влияют?
У меня такую конмтрукцию Rambler схавал нормально. Единственное css были отдельным файлом, и если они не догружались (такое часто бывает), то не совсем красиво это всё смотрелось :(
