для начала по юзер-агенту в .htaccess запретите боту..
а вообче - в то же .htaccess грамотно разрулите правила для конкр. файлов/дир.
смысл..
мну кажеться - это просто извращение, др. слова не подберу..((
например
Options +FollowSymLinksRewriteEngine onRewriteRule (.*) http://www.newsite.ru/$1 [R=301,L]
читаю Ваши ответы по темам и просто душа отдыхает, особенно зтот перл.. пишите в том же духе ))
зы. тока с правописанием дружите, а то уж совсем жесть..
можете решить проблему проще - закрыть доступ в .htaccess по юзер-агенту боту пс..))
- соблюдайте синтаксис:
/dir/
/file
- редактируйте свой robots.txt в режиме UNIX и закачивайте файл на сайт в режиме ASCII: многие FTP-клиенты умеют при закачке в текстовом режиме переводить символы строки из DOS-формата в UNIX-формат, но некоторые этого не делают
- системные директории закрывать не надо (ака cgi-bin,includes,language и т.п) - большинство ботов их игнорирует по дефолту..
почему постоянно вешаются ссылки с "левыми" ценами - пакетная продажа не разрешалась, скидок нет,код новый?
почему не работают фильтры по параметрам размещения ссылок: изначально задано определенное число слов "внутри, до и после" <a>..</a>, а О вешает любое кол-во слов..?
в техподдержку отписано, но проблема по всем аккам одна и таже..((
в роботсе указывается основной домен для бота,а если хотите поклеить - пропишите в .htaccess
на наличие трояна проверьте компьютер, а почту пока отправляйте через веб интерфейс
только обчение с носителем языка..))