Сцайт в индексе? За неправильно организованный процесс (реализации правильной идеи) смены урлов вы можете получить всплеск вероятности неприятностей.
Страницы с какими урлами сейчас в выдаче хорошо сидят? Что будет после смены урлов?
И зачем site.ru/tovar/artikul ?
Может site.ru/tovar-artikul ?
Википедия тоже без разделов, всё в одном /wiki/
Попробуйте поиграться разными кусками текста
https://www.yandex.ru/search/?text=%D0%BD%D0%B0%D0%B2%D0%B8%D0%B3%D0%B0%D1%86%D0%B8%D0%BE%D0%BD%D0%BD%D1%8B%D0%B5+%D1%86%D0%B5%D0%BF%D0%BE%D1%87%D0%BA%D0%B8+url%3Ayandex.ru%2Fsupport%2Fwebmaster%2Fsearch-results%2Fsite-description.xml
https://www.yandex.ru/search/?text=%D0%9D%D0%B0%D0%B2%D0%B8%D0%B3%D0%B0%D1%86%D0%B8%D0%BE%D0%BD%D0%BD%D1%8B%D0%B5+%D1%86%D0%B5%D0%BF%D0%BE%D1%87%D0%BA%D0%B8+%D1%81%D1%82%D1%80%D0%BE%D1%8F%D1%82%D1%81%D1%8F+%D1%82%D0%BE%D0%BB%D1%8C%D0%BA%D0%BE+%D0%B4%D0%BB%D1%8F+%D0%BA%D1%80%D1%83%D0%BF%D0%BD%D1%8B%D1%85+%D1%81%D0%B0%D0%B9%D1%82%D0%BE%D0%B2+url%3Ayandex.ru%2Fsupport%2Fwebmaster%2Fsearch-results%2Fsite-description.xml
и засунуть в выдачу не-заголовок.
Вообще басни про аннотирование словом релевантность не слишком проспамлены.
<li><a href="../index.html">Главная</a></li>
Есть чего и поважнее безопасности /ru/forum/935825
Ну как быть, кричать, что виноват тупой бот, кто же ещё.
А может проблема в том, что ваш сервак отвечает 200 на всё?
Вот хлам из шапки поищите по урлу www.unmedia.ru/shablon-sajta.html
А бывает ли
GET HTTP/1.1 Host: site.ru
А то же самое JS, закрытым в роботсе, пробовали?
А траф-то какой будет по этой ахинее?
http://blog.lexa.ru/2007/12/14/beshenie_seoroboti.html
БОльшей проблемой является ответ на вопрос: Что понравится искателю, забившему конкретный запрос?
