Много 404 ошибок

в ISP ходить умеем ? там и смотрите, в менеджере файлов. директория типа /var/www/пользователь/www/домен/www/

или в VDS собственные файлы

или например дримом под root пользователем по SFTP

Знал бы я что там еще смотреть... посмотрел htaccess, вроде все как было. Вобщем без пол литра не разобраться.

Ладно всем огромное спасибо... боюсь не осилю я поимку этих доров.

повидимом хватит на всякий случай переустановить VPS и перезалить сайт и BD

или забрать дамп БД и уходить к адекватному хостеру.

ну и с гуглом придётся всё же разбираться :)

А возможно такое что кравлер идет по адресу не такому:

А переходит на сайт по такому адресу:

Тоесть он обращается к страницам напрямую по IP.

P.S.Вчера просканировал скриптом Ai-Bolit ничего подозрительного замечено не было.

Не надо ISP ;)

Берёшь нормальный файлменежер (тоталкомандир, например) и с пом. синхронизации сравниваешь файлы. Можно сразу на ФТП, но для надёжности лучше скачать все файлы с сайта, и включить проверку по содержимому.

Можно использовать и спец. программу для синхронизации и\или массового сравнения файлов.

Дык всегда можно обратиться к спецам (WebGomel насколько я могу судить по топикам грамотный и адекватный спец)

SeVlad, вы говорили что можно сделать 301 редирект. Скажите как можно его осуществить?

Ссылки все начинаются с чисел:

Мои ссылки на сайте не начинаются с чисел, может можно какое-то правило в htaccess написать чтобы редирект срабатывал с этих спам ссылок на главную страницу?

^(\d+)(.+).html$

Я прошу прощения, а можно более подробно написать правило для htaccess.

Не очень ясно в таком виде :o

как-н типо так:

RewriteEngine On
RewriteBase /
#
RewriteRule ^(\d+)(.+)$  / [R=301,L]

хотя зачем этот 301 не понимаю:

- логичнее и экономнее в robots запрет поставить на эти урлы + рУками удалить всё из индекса в панели гугла. всё по тому же шаблону

- побегает бот по битым урлам, всем раздаст 404 и когда-н удалит в любом случае. но это на крайний уровень лени

Не реально их запретить и удалить... их десятки тысяч, а может и сотни тысяч. У меня столько свободного времени нет чтобы сидеть и отлавливать свежие урлы.