Можно ли зациклить индексируещего робота?

Недавно видел такую ошибку: на странице была ссылка на "режим для печати", устроенная так:

<a href="CURL?print=1">print</a>, где CURL - текущий адрес. По ошибке программиста эта ссылка была и на самой странице для печати. В результате, роботы лезли на адреса

site.ru/?print=1

site.ru/?print=1?print=1

site.ru/?print=1?print=1?print=1

и т.д.

И это было для всех страниц сайта! :)

Короче, индексировалось всё медленно и находилось плохо, т.к. роботам приходилось качать много одинаковых страниц, а потом ещё и убивать дубли. Может и у Вас что-нибудь похожее сделано? Такую ошибку легко найти, посмотрев, чего именно качают пауки.

Artad, нам знаком ваш сайт. На нем стоит ручной фильтр.

Какова причина фильтра? Или мы может быть говорим о разных сайтах?

Ведь адреса я не давал :)

да, мне это тоже очень интересно

Яндeкс,

[offtop]

скажите в чем причина, дельных мыслей не получил:

/ru/forum/43704

[/offtop]

Адрес твоего сайта Яндекс нашел на этом или каком-то другом форуме. Видимо когда-то ты всеже проговорился. Поищи в нете свои сообщения и поудаляй быстрее. 🙅

Artad, а вы не в курсе, что мы можем его итак определить?

Вы описали достаточно признаков для выделения группы сайтов. Остальная информация о вас взята прямо на этом сайте из открытых источников. Например IP определен по ICQ.

с 1-м апреля!

"яндекс" жжот нипадецки.

---------

З.Ы. Яш.. ты это.. осторожнее.. тут все хронические параноики..☝

IP по ICQ не всегда определишь когда в онлайне. А я вообще аську последние несколько дней не включал

:)

Artad, логи хранятся. Не думаете же вы, что у нас нет друзей среди провайдеров?