На сколько я понимаю, нужно так:
User-Agent: *
Disallow:
User-Agent: yandex
Host: porsch-info.ru
P.S. сори, скопировал не посмотрев, убрал слеши.
Ну, много про что говорят. Я вот, например, полагал, что страницы. запрещенные к индексации в Гугл и не содержащиеся в его индексе не имеют PR.
Недавнее обсуждение на практике продемонстрировало что это не так, т.е. что они имеют PR.
Я думаю, что заказывать продвижение будут те у кого поток клиентов из интернета занимает основную или существенную часть. Например, интернет-магазины.
А вот узнать в толпе, тех, кто через 2-5 лет откроет интернет магазин уже сложнее :)
Что бы обойти такую страничку, на нашу желательно иметь ссылку с PR4 и желательно с нужным ключевиком в анкоре :)
Гугл не все бэки показывает. По пробуйте воспользоваться http://siteexplorer.search.yahoo.com/
Он может дополнить картину по бекам.
Т.е. Вы думаете, что если мы создадим сайт, состоящий из одной страницы (главной) с которой не будет исходящих ссылок, но будет множество входящих внешних с жирных сайтов, то наш сайт(страница) не будет по релевантным запросам в Гугле высоко ранжироваться?
Забыта одна скромная, но важная деталь :)
Гугл в отличие от Яндекса при ранжировании отдает предпочтение точным словоформам в тексте страницы и в тексте (анкорах) внешних ссылок.
Потому, что это уменьшает вероятность бана.
Для обычного не каталожного сайта каталог - это не основная информация, поэтому размещение его на главной странице расценивается как умышленная накрутка (этих ресурсов в поисковой системе) с весомой главной страницы.
За размещение нескольких ссылок на главной обычно санкций не следует.
Плюс, Ваш каталог ресурсов на отдельной странице должен выглядеть как Ваша рекомендация посетить эти ресурсы, с описанием ресурсов, а не простым перечислением гиперссылок или баннеров. Плюс неплохо, что бы он был тематическим и соответствовал тематике Вашего сайта.
И еще Вы не должны иметь большого количества обратных ссылок с сайтов, находящихся в этом каталоге иначе это воспринимается не как бескорыстная рекомендация, а как взаимовыгодый обмен с целью влияния на алгоритм поисковой системы.
Понятия вес сайта нет, есть понятие вес страницы.
Потому, что это их основное направление деятельности - подбор по тематикам интересных ресурсов.
Определяет по last-modified, если сервер last-modified не возвращает, то дата в Яндексе не ставится. Думаю, что в таком случае Яндекс заново переиндексирует страницу, считая, что не известно менялась ли она.
Обычно по умолчанию для скриптов сервера last-modified не выдают.
Можно, как указывали выше "самому" отдавать last-modified для скриптов.
P.S. Так как за один заход Яндекс переиндексирует не все страницы сайта, рекомендуют отдавать реальную дату изменения, что бы в первую очередь переиндексировались страницы, реально претерпевшие изменения.
Да, это так.
На этот pdf могут ссылаться еще другие сайты.
P.S.
Совет, уходите от вопросов про pdf, спрашивайте по-другому -
"Легко ли вытеснить страничку на котоую ... бэк(ов) с PR..., PR..., PR..." с такими-то анкорами :)