Как написано в Библии, кто копает яму другому, тот сам у нее упадет. Существует простой способ боротьбы с подобными происками конкурентов. В результате пострадает не невиновный конкурент, а копающий на него яму. Так что зря стараетесь. Подобные методы недостойны обсуждения.
Можно сделать аналог этой страницы в html или PHP для индексации и сделать где-то ссылку на эту страницу, а в данном варианте сделать на скриптах. Лично я подобные проблемы решал именно так.
К тому же количество товаров нужно умножить на количество вариантов написания или даже возвести в степень (если возможны варианты сочетания товар1+товар2 ... товар127+товар32, рога+копыта, рога без копыт и т.д.) :)
Если все ссылки сделать на скриптах, то поисковик действительно дальше главной не пойдет (если не будет внешних ссылок на эти страницы) и особого смысла в оптимизации нет. Бывают еще случаи, когда нужно оптимизировать только главную страницу, но это скорее исключение чем правило. В некоторых случаях на главную приходит не более 10-20% от всех посетителей, так что ограничиватся главной страницей не стоит.
Проги разные бывают.
Скачать Лог-файл и обработать специальной программой. Лично я для этого использую свою простенькую програмку, но в сети можно найти неплохие анализатори логов.
1. Нет. 2. Нет.
Все остается так, как в коде страницы. Ссылка на файл CSS без изменений.
Я могу назвать только Гугл и Яндекс. Но дело не в количестве роботов, основных из них можно перечислить на пальцах.
А о чем речь? Изменился алгоритм, но ЯндексДирект работает. О какой невозможности идет речь?
Некоторые берут скрипты и таблицы стилей (.js, .css) для сохраненных копий страниц, которые отображают по запросу, как сохраненные в кеше поисковика.