Не совсем так.
Речь идет о сайте, который не является каталогом сайтов и результаты поиска по сайту ведут на страницы собственного сайта, например, как здесь http://www.aif.ru/search?query=%E3%E0%E7%E5%F2%FB&chapter=
но файл или директория search не закрыты в robots.txt
Так вот, будут ли в этом случае, результаты внутреннего поиска по сайту, открытые для робота, поводом для бана?
А с чего вы взяли, что рамблер и прочие особого трафа не дают?
Вот spylog график статистики по рунету
http://gs.spylog.ru/r/?dayFrom=1&monthFrom=1&yearFrom=2006&dayFor=11&monthFor=8&yearFor=2006<Type=4&radioReportOption=visitors&x=24&y=23&graphCurve0=1&graphCurve1=2&graphCurve2=138&graphCurve3=359&graphCurve4=355&graphCurve5=32&graphCurve6=91&ableSubmit=0&graphCurveNumbers=39&graphCurveCheckedNumbers=7&curvePerGraph=7&order=visitors&desc=1&inner=0&reportId=7&categoryId=1&representationType=graph
или ваш сайт забанен рамблером и гуглем, и это такой своеобразный протест :)
Модератор каталога Яндекса смотрел страницы вашего сайта.
Вам повезло, наверное, сайт скоро добавят в каталог. ;)
Проверьте еще, на всякий случай, есть ли страницы сайта в индексе:
http://webmaster.yandex.ru/check.xml
На частоту индексации внешними факторами влиять невозможно. Не помогут тут и мета теги.
Единственный способ - чаще обновлять сайт.
Например, популярные доски объявлений или новостные сайты, индексируются по нескольку раз в день.
Попробуйте сделать на сайте новые (!!!) страницы и поставить на них внешние ссылки, например, с белых каталогов.
Увидите, что в течение суток робот зайдет.
Робот и поиск, это как бы две разные организации. :) Один занимается одним, второй - другим.
После того, как робот проиндексирует и поиск обработает эти данные, проходит время.
В среднем, одна-две недели.
http://www.yandex.ru/yandsearch?Link=www.site.ru
Ну зачем сразу набрасываться на человека, мол, "магнитные травяные бури" и т.д.
Утечка информации от какого-то сотрудника Яндекса вполне реальна. Тем более, если этот сотрудник чем-то недоволен.
Может быть и деза от самого Яндекса. То есть, нужно воспринимать всё с точностью до наоборот. ☝
Как бы то ни было, это материал для размышления и для анализа.
Илья Сегалович (отрывок из статьи)
Алгоритмы определения нечетких дубликатов
/ru/forum/56951
