то что браузер получает и то что сохраняет после того как код съел и переварил - две большие разницы ;) попробуйте сохранить не "страницу" а "исходный код" - это будет ближе к тому что кушают боты...
---
мне кажется, что создатели скрипта (или местный программер?) решили, что если на каждой страницы магазины будет втиснута вся БД - это немерено повысит релевантность. ;) тонкий ход, однако...
не пугайте человека - всего 604 Кб 🙅... сразу всю базу в код пихаем, на всякий случай? офффигеть...
панель вебмастера -> доступ для сканера -> удалить URL -> удалить каталог.
удаляете весь старый форум из поиска... живёте счастливо.
имхо - до 100 кб можно не дёргаться (на норм хостинге) а вот дальше - графику портить начинать, комменты нафиг... да и переносы строк убирать для "проффесианализьма" ;)
купить сайт, который на 1-ом месте ;) но это в другом разделе... да! и админа-сеошника тоже покупать придётся :)
не стоит всем ботам подсовывать убогую яшину директиву ;) ежли очень надо то :
User-agent: *Disallow: User-agent: YandexDisallow: Host: www.site.ru
ссылка "на себя", что ли?... да ни как не должна влиять (по идее). но выглядит как лёгкий баг , и как намёк на автогенерацию контента (спорно). но гуру Лебледев не одобряет категорически :)
типичный АГС-17 :( варезник, он и есть варезник, что уж тут...
ну а письмо с отчётом - всё как надо ;) можно штамповать пачками... имхо :)
ну alt то другая песня совсем ;) - замена графики текстом...
ЗЫ: порадовала тема... +
сапа-форум -> софт... -> расширяем... -> ищем сцылку на архив