Насколько мне известно, в pdf файлах есть заготовки, ключевые слова, ссылки и т.п. логические выделения текста что и HTML. Также на pdf файл можно поставить внешнюю ссылку. Следовательно теоретически можно оптимизировать. Но на практике вряд ли кто этим занимался.
В крайнем случае можно и так узнать
А почему ночью?
vmegap, как соответствует Ваш аватар правилам форума?
14. Запрещено использование в сообщениях нецензурных слов, брани, оскорбительных для других участников выражений.
В Рамсторе видел.
Вообщем так выбросте все советы, что выше.
Найдите прогу, которая может показать Вам HTTP заголовки.
Самая стандартная telnet.
Но есть еще много всяких, которыми любят пользоватся программисты.
У меня например стоит плагин к IE называется он HttpWatch.
Когда сервер отдает любой документ юзерагенту, будь-то бот или бразузер с человеком, сервер сначала отдает HTTP заголовки, а потом уже html.
Что бы все было нормально, надо что бы эти заголовки начинались так: HTTP/1.1 200 OK
Иногда полезно побродить по страницам Яндекса
Тег надо писать так <meta NAME="ROBOTS" CONTENT="NOINDEX">
Три года ссылками менятся... IMHO это деградация...
Alt, пробуйте иногда посещать главную страницу сайта с каталогом. Иногда самому можно найти ответ быстрее. ;)