Как работает Yandex паук

Только при принятии решения о наложении санкций. В остальных случаях - нет.

Ему нужно задать маршрут регулярного обхода (сформулировать запросы). Без подсказок пользователя он совершать поиск, естественно, не будет.

Яндекс - нет, а Гугл жрет все подряд, включая тексты сгенерированные джаваскриптом, если индексация файла с этим скриптом не запрещена.

вывожу один и тот же текст на всех страницах при помощи яваскрипта. По куску текста сайт не ищется в выдаче!!!

twiprogon, а у меня наоборот... Недавно тест ставил: скриптом из джава файла, который загружался в конце страницы, в div подставлялясь рекламная ссылка. Так вот когда этот js-файл в robots.txt был запрещен к индексации, текст ссылки в выдачу не попадал, но когда я снял запрет на индексацию, текст ссылки появился в выдаче. Возможно, это зависит от способа вывода. Касается всё вышеизложенное только Гугла.