Это старинный скрипт "ваш сайт глазами...". Он где-то в недрах нашего хелпа лежит. И пользуются им обычно сами же вебмастера.
То есть. Вывод.
Это был не робот. Это были Вы сами.
Никакой связи между запрсами к Яндексу и баном из базы нет и быть не может. Банят за "плохой контент, нарушающий логику работы ранжировщика" а не за недостойное поведение в общественных местах наподобие флуда запросов в поисковую систему.
Ваш сайт забанили за то, что вы выложили на сайт гигантское количество результатов поиска. Мы такие вещи банили, баним и будем банить.
Почитав выложенные в статику результаты чужих поисков, я надеюсь, они останутся полностью удовлетворенными?
http://www.[skipped].ru/saved_Sony%2BPlaystation%2Bgames%2Bdownload.html
И такого там "тысячи, тысячи"...
Мы готовим приятный сюрприз для всех метаискателей. Ждите. Немного осталось.
Илья
Я вспомнил. Речь там шла про openfind. (причем я сам видел его робота, который бродил по нашему сайту)
В настоящий момент это самый большой поисковик в мире.
http://www.openfind.com/
Test Site, Indexes 3.5 billion web pages
Их главная официально работающая страничка на китайском:
http://www.openfind.com.tw/
Про них написано здесь:
http://www.researchbuzz.com/news/2002/jul4jul1002.shtml#searchengine
здесь:
http://www.searchengineshowdown.com/features/openfind/review.html
и здесь:
http://www.searchengineshowdown.com/newsarchive/000036.shtml
Я думаю, что робот альты понимает и слушается директив как для scooter так и для mercator.
я бы не был таким категоричным.
http://www.webmasterworld.com/forum11/1558.htm
http://www.webmasterworld.com/forum11/385.htm
http://www.searchengineworld.com/spiders/ip_addresses/altavista.htm
http://www.spiderhunter.com/spiderlist/spiderinfo.txt
Q: Is Mercator from Altavista?
A: It was formerly run from Compaq/Dec.com. Word has it, that the new Scooter is actually the old Mercator. The old Mercator from dec.com appears to have been retired. Yes, it is AV.
http://www.webmasterworld.com/forum1/1621.htm
From what I've seen, mercator seems to be part of the "submit a site" process, while scooter is the autonomous web-crawler. And there's also a scooter variant with "qa" in the name that may be a dead-link checker.
Суммирую.
mercator - это имя робота ("программы"), которую написали в альтависте для большого веба, марк рассказал про нее на конференции, а потом уже (независимо) ее встроили в av search engine 3.0
имя user-agent-а может быть как scooter так и mercator да и вообще каким угодно (там кстати сейчас новый робот (!) написан - я запамятовал как его зовут). другое дело, что scooter это их старое первоначальное брендовое имя, которое они стараются употреблять где возможно (для совместимости)
в общем meractor который ходит с dec - это безусловно altavista.
а вот mercator который ходит с fireball.de или matavnet.hu - это, да, согласен, altavista search engines v 3.0, купленный соответствующим порталом. только спрашивали не про него.
Их робот называется Меркатор. Автор - Марк Найорк. Разработчики Альтависты (не путать с порталом Альтависта принадлежащем CMGI) раньше работали в составе DEC, потом они назывались Compaq Research Center, а теперь, наверное, "HP чего-то-там".
Доменное имя dec - унаследовано, естественно.
Это всяческие автоматические понижения. В поиске остается всё. Просто "низко-низко". :)
Где-то на searchenginewatch было упоминание китайского поисковика база которого больше чем у гугля. Я туда даже ходил и смотрел. Они кажется даже Россию индексировали (до кучи). Забыл как звали.
Полный бан делается после обязательного просмотра глазками.
Слишком рисковано доверять автомату в таких тонких материях.
Этот интересный сайт называется www.altavista.com
