> так а как разрешить главную?
Allow: /$
User-agent: *
Disallow: /files/
Disallow: /profile.php?mode=sendpassword
Disallow: /russian/
Disallow: /english/
Disallow: /static/i/
Disallow: /cache/
Disallow: /texts/
Disallow: /functions/
Disallow: /vote/
Disallow: /complain.php
Allow: /abc_
Disallow: /
Не, так лучше не делать, лучше в htaccess прибанить
http://sitepumper.ru/
http://www.addsearch.ru/
Нормальные люди будут попадать в нормальный ад, спаммеры - в колотибабло, навечно 😂
Обычный фишинг
http://www.bing.com/community/site_blogs/b/webmaster/archive/2009/08/10/crawl-delay-and-the-bing-crawler-msnbot.aspx
Проверьте, от движка зависит
В htaccess смотрели?
Логи смотрите, про куки забудьте
В таком виде скорее никому ничего не запрещает http://help.yandex.ru/webmaster/?id=996567
