Есть в буржунете модный термин, авторитетность (authority) называется.
С такими сайтами очень приятно работать - внутренние страницы по тематическим запросам выводятся за счёт только внутренних же ресурсов. Что особенно приятно - легко переживаются все апдейты.
Скажу по секрету, проверку можно отложить и всё будет преспокойно работать.
А выковыривать батарею из ноута, чтобы посмотреть код уж больно лениво :)
Те, которые содержат преимущественно английские слова :D
Это шесть признаков того, что вы живёте в Москве :D
-Доктор, у меня ЭТО.
-Лечение будет стоить СТОЛЬКО.
Для абстрактного русскоязычного сайта разброс между посетителями с Яндекса и Гугля в пределах допустимого. Ещё кстати вопрос: цифры преведены только по google.ru или же по всем национальным доменам, типа google.com.ua, google.kz, google.lv и т.д?
имелось ввиду A в user-agent. Но это совет "на удачу" - по стандарту The field name is case insensitive.
Если цель закрыть только pdf файлы - то да.
Если закрывается ещё что-то, например /cgi-bin/, то всё нужно продублировать в секции для Гугля, т.к. при наличии персональной секции бот игнорирует общие директивы.
Для гугля кстати и так можно:
User-agent: Googlebot Disallow: *.pdf
По-моему пора привыкать, что выдача во всех поисковиках меняется всё чаще и чаще. Картина мира меняется ежедневно, поисковики стараются не отставать. НЕ говоря уже о том, что по моим ощущениям у Яхи перманентные проблемы с откликом серверов даже вне дни апдейта запросы с небольшим интервалом по времени выдают одинаковые результаты через раз.
А сейчас на одном из моих проектов траффик второй день как стабилизировался на довольно приличном уровне (ок. 2K в день).
Гы. Ещё бы. Доступ открыт всего-то несколько дней был.